Saat mempertimbangkan penjelasan yang ditampilkan dari layanan, Anda harus memperhatikan batasan umum berikut. Untuk mendapatkan penjelasan mendalam, lihat Laporan Resmi Penjelasan AI.
Pengertian dan cakupan atribusi fitur
Pertimbangkan hal-hal berikut saat menganalisis atribusi fitur yang disediakan oleh AI Explanations:
- Setiap atribusi hanya menunjukkan seberapa besar fitur tersebut memengaruhi prediksi untuk contoh tertentu. Atribusi tunggal mungkin tidak mencerminkan perilaku model secara keseluruhan. Untuk memahami perkiraan perilaku model di seluruh set data, gabungkan atribusi di seluruh set data.
- Atribusi bergantung sepenuhnya pada model dan data yang digunakan untuk melatih model tersebut. Model hanya dapat mengetahui pola yang ditemukan model dalam data, dan tidak dapat mendeteksi hubungan mendasar apa pun dalam data. Jadi, ada atau tidaknya atribusi yang kuat pada fitur tertentu tidak berarti ada atau tidak ada hubungan antara fitur tersebut dan target. Atribusi hanya menunjukkan bahwa model sedang menggunakan fitur tersebut ataupun tidak, dalam prediksinya.
- Atribusi saja tidak dapat mengetahui apakah model Anda adil, tidak bias, atau memiliki kualitas baik. Selain atribusi, evaluasi dengan cermat metrik set data, prosedur, dan evaluasi pelatihan.
Meningkatkan atribusi fitur
Faktor-faktor berikut memiliki dampak terbesar terhadap atribusi fitur:
Metode atribusi memperkirakan nilai Shapley. Anda dapat meningkatkan presisi perkiraan dengan:
- Meningkatkan jumlah langkah integral untuk metode Integrated gradients atau XRAI.
- Meningkatkan jumlah jalur integral untuk metode Sampled Shapley.
Akibatnya, atribusi dapat berubah secara drastis.
Atribusi hanya menyatakan seberapa besar fitur tersebut memengaruhi perubahan nilai prediksi, relatif terhadap nilai dasar pengukuran. Pastikan untuk memilih dasar pengukuran yang bermakna, yang relevan dengan pertanyaan yang Anda ajukan tentang model. Nilai atribusi dan penafsirannya dapat berubah secara signifikan saat Anda beralih dasar pengukuran.
Untuk metode Integrated Gradients dan XRAI, penggunaan dua baseline dapat meningkatkan kualitas hasil. Misalnya, Anda dapat menentukan baseline yang merepresentasikan gambar yang seluruhnya hitam dan seluruhnya putih.
Batasan untuk data gambar
Dua metode atribusi yang mendukung data gambar adalah Integrated Gradients dan XRAI.
Integrated Gradients adalah metode atribusi berbasis piksel yang menyoroti area penting dalam gambar terlepas dari kontrasnya, sehingga ideal untuk gambar tidak alami seperti sinar-X. Namun, output terperinci dapat membuat metode ini kesulitan untuk menilai tingkat kepentingan relatif berbagai area. Output default metode ini menyoroti area dalam gambar yang memiliki atribusi positif tinggi dengan menggambar garis batas, tetapi garis batas tersebut tidak diperingkatkan dan dapat mencakup banyak objek.
XRAI berfungsi paling baik pada gambar yang alami dan memiliki kontras tinggi serta berisi banyak objek. Karena menghasilkan atribusi berbasis area, metode ini akan menghasilkan peta panas yang lebih halus dan mudah dibaca manusia dari area yang paling kentara untuk klasifikasi gambar tertentu.
Saat ini, XRAI tidak berfungsi dengan baik pada jenis input gambar berikut:
- Gambar berkontras rendah yang semuanya berupa satu bayangan, misalnya sinar-X.
- Gambar yang sangat tinggi atau sangat lebar, seperti panorama.
- Gambar yang sangat besar, yang dapat memperlambat runtime secara keseluruhan.