Catatan Kemampuan Model untuk Klaim Publik

Mulailah dengan perilaku produk yang dapat diamati

Teks beranda harus menggambarkan perilaku yang dapat diverifikasi pelajar: sistem mengajukan pertanyaan, mengevaluasi jawaban, menjelaskan bagian yang tampak kokoh atau rapuh, dan memilih langkah berikutnya. Pernyataan-pernyataan itu tetap berguna meskipun penyedia atau versi model di baliknya berubah.

Nama vendor bukanlah hasil belajar. Menyatakan bahwa produk memakai model mutakhir tidak membuktikan bahwa suatu jawaban dinilai dengan baik, bahwa suatu miskonsepsi terdeteksi, atau bahwa pertanyaan berikutnya sudah tepat. Karena itu Robotutor memperlakukan identitas model sebagai konteks implementasi, bukan pengganti bukti tentang pengalaman belajar.

• Utamakan klaim tentang siklus belajar yang terlihat daripada kata sifat seperti terbaik, tercerdas, atau terkuat.
• Jangan menjanjikan akses ke model bernama tertentu kecuali perutean dan hak akses yang diterapkan membuktikan akses itu.
• Simpan klaim khusus model di halaman sumber daya atau pengumuman yang bertanggal, bukan di teks utama beranda yang bersifat abadi.

Gunakan buku catatan klaim sebelum menerbitkan

Setiap klaim publik yang material harus memiliki empat bukti: kalimat yang persis sama, implementasi atau konfigurasi yang mendukungnya, sumber eksternal bila klaim menyangkut hasil vendor atau riset, dan pemilik yang akan meninjaunya kembali ketika sumber berubah. Klaim tanpa pemilik menjadi usang meskipun dahulu akurat.

Misalnya, pernyataan bahwa jawaban dinilai oleh AI dapat dikaitkan dengan rute evaluasi jawaban dan demonstrasi di browser. Pernyataan bahwa suatu model bernama tersedia bagi pelanggan memerlukan lebih banyak: konfigurasi penyedia yang diterapkan, jalur hak akses penagihan, dan dokumentasi model terkini dari penyedia semuanya harus sejalan.

• Bukti produk: rute, konfigurasi, evaluasi, atau perilaku antarmuka yang dapat direproduksi.
• Bukti eksternal: riset primer, lembaga standar, atau dokumentasi resmi penyedia.
• Pemicu tinjauan: perubahan penyedia, perubahan perutean, perubahan harga, atau bukti evaluasi yang bertentangan.
• Redaksi cadangan: kalimat netral terhadap penyedia yang tetap benar jika nama model dihapus.

Pisahkan kemampuan dari keandalan

Sebuah model dapat menunjukkan kemampuan umum yang kuat dan tetap menghasilkan penjelasan yang salah, melewatkan pertanyaan yang ambigu, atau menerapkan rubrik yang keliru pada jawaban pelajar. Robotutor harus menggambarkan sistem ini sebagai otomatis dan dapat keliru, dan tidak boleh mengubah hasil tolok ukur menjadi jaminan untuk pelajaran individual.

Keandalan berasal dari perangkat di sekitar model: konteks yang berlandaskan fakta, kriteria penilaian yang eksplisit, keluaran terstruktur, percobaan ulang jika sesuai, rangkaian evaluasi, umpan balik pelajar, dan batasan produk. Teks publik harus membuat perbedaan ini terlihat agar pembaca memahami mengapa sistem pembelajaran lebih dari sekadar nama model dan mengapa jawaban yang penting tetap perlu diverifikasi secara independen.

Tinjau pernyataan tentang model bernama secara berkala

Halaman tentang model bernama harus mencantumkan tanggal tinjauan dan memakai tautan yang mengarah ke dokumentasi terkini dari penyedia. Ketika sebuah model dihentikan, diganti namanya, atau digantikan, halaman itu harus diperbarui dengan penjelasan yang substantif atau klaim bernama itu harus dihapus. Mengubah tanggal saja tanpa mengubah bukti akan membuat halaman tampak lebih baru tanpa menambah nilai.

Komitmen yang tetap adalah menggunakan model yang memenuhi standar kualitas produk untuk tugas tersebut. Bagian yang dapat direvisi adalah penyedia dan model mana yang saat ini memenuhi standar itu. Kerangka ini memungkinkan produk meningkat tanpa mengubah setiap perubahan infrastruktur menjadi janji pemasaran yang terlanggar.

Pemeriksaan praktis sebelum publikasi

Sebelum menerbitkan klaim model, bacalah sebagai pelajar yang skeptis. Tanyakan apa yang akan diharapkan orang yang wajar dari kalimat itu, apakah harapan tersebut dapat direproduksi pada produk saat ini, dan bukti apa yang dapat membantahnya. Jika jawabannya bergantung pada informasi internal yang tidak dapat diperiksa pembaca, persempit klaim dan jelaskan keterbatasannya.

• Dapatkah pengguna mengamati perilaku yang diklaim hari ini?
• Apakah sumbernya terkini, resmi, dan ditautkan?
• Apakah redaksinya membedakan kemungkinan dari jaminan?
• Apakah pernyataan itu tetap jujur saat penyedia mengalami gangguan atau terjadi perutean cadangan?
• Apakah ada jalur koreksi yang jelas melalui kebijakan editorial?