Playbook Kartu Data: Dokumentasi transparan untuk kuis responsible AI

Manakah dari pernyataan berikut ini yang benar tentang transparansi AI dan set data?

Pilih sebanyak mungkin jawaban yang Anda inginkan.

Memperkenalkan mekanisme yang terstandardisasi, praktis, dan berkelanjutan untuk transparansi yang dapat menciptakan nilai dalam skala besar sering kali tidak berhasil dalam konteks penelitian dan produksi.

Transparansi bersifat linear.

Transparansi terlihat sama di seluruh tim, produk, dan organisasi.

Transparansi bersifat subjektif, spesifik per audiens, dan kontekstual.

Benar atau salah? Kartu Data memungkinkan pembaca membuat keputusan terkait penggunaan data dengan lebih nyaman dan percaya diri saat mereka membuat dan mengevaluasi model AI untuk produk, kebijakan, dan riset.

True

Salah

Untuk menangkap peran, tanggung jawab, dan kebutuhan pemangku kepentingan dalam siklus proses {i>dataset

Pemangku kepentingan yang membaca dokumentasi set data atau Kartu Data Anda dan dokumentasi terkait model machine learning (ML) lainnya.

Pembuat set data dan dokumentasi, serta bertanggung jawab atas pengumpulan, kepemilikan, peluncuran, dan pemeliharaan set data.

Individu dan perwakilan yang berinteraksi dengan produk yang mengandalkan model yang dilatih pada set data.

Pemangku kepentingan yang memiliki agensi untuk menentukan bagaimana mereka atau orang lain mungkin menggunakan set data atau sistem AI yang dijelaskan.

Kategori metrik untuk Kartu Data mana yang melacak persentase produsen yang menyelesaikan dan memublikasikan Kartu Data dari template, dan persentase pembaca yang membuat keputusan tentang set data berdasarkan Kartu Data-nya?

Kemampuan memahami

Kemampuan mendukung

Interaksi

Konversi

Kartu Data yang hanya berisi pertanyaan ___ bisa menjadi terlalu teknis tanpa detail tentang konteks, relevansi, atau tingkat kepentingan.

Teleskop

Periskopik

Mikroskopis

Endoskopi

Manakah dari tujuan berikut yang harus dicapai desain Kartu Data agar dapat diadopsi?

Pilih sebanyak mungkin jawaban yang Anda inginkan.

Kartu Data harus sebanding satu sama lain.

Kartu Data harus dibuat sebagai langkah terakhir dalam siklus proses set data.

Kartu Data akan berguna untuk melaporkan ketidakpastian dalam set data.

Kartu Data harus berkomunikasi secara efisien kepada pembaca dengan kemahiran tertinggi.

Manakah dari pilihan berikut yang bukan merupakan cara yang direkomendasikan untuk mengukur dampak Kartu Data setelah diluncurkan?

Interaksi

Kemampuan memahami

Ketahanan dan stabilitas

Kelengkapan

Benar atau salah? Jika Kartu Data Anda dapat ditemukan, digunakan, dan dibangun dengan baik, keyakinan pembaca yang sudah ada tentang set data, organisasi, dan set data Anda lainnya yang dipublikasikan oleh organisasi Anda tidak boleh memengaruhi cara mereka berinteraksi dengan Kartu Data.

True

Salah