Microsoft ASSERT, Senjata Ampuh Cek Kepatuhan AI di Era Digital

Bird menambahkan bahwa ASSERT dapat dimanfaatkan di berbagai tahap pengembangan, mulai dari proses pembangunan sistem, setelah implementasi, hingga pemantauan berkelanjutan ketika sistem sudah digunakan.

Peluncuran ASSERT juga mencerminkan tren yang semakin berkembang di industri AI. Seiring meningkatnya kemampuan model-model AI, perhatian para peneliti kini tidak hanya berfokus pada performa, tetapi juga pada pengujian berulang dan deteksi regresi untuk memastikan kualitas sistem tetap terjaga.

Sejumlah inisiatif lain dengan tujuan serupa telah lebih dulu hadir, seperti HELM dari Stanford, AILuminate dari MLCommons, serta berbagai benchmark yang dikembangkan oleh kelompok evaluasi METR untuk mengukur perilaku model AI dalam beragam kondisi dan skenario penggunaan.