Herkese Açık İddialar İçin Model Yeteneği Notları

Gözlemlenebilir ürün davranışıyla başlayın

Ana sayfa metni, bir öğrencinin doğrulayabileceği davranışı tanımlamalıdır: sistem bir soru sorar, yanıtı değerlendirir, nelerin sağlam veya kırılgan göründüğünü açıklar ve bir sonraki hamleyi seçer. Bu ifadeler, altta yatan sağlayıcı veya model sürümü değişse bile yararlı kalır.

Bir satıcı adı bir öğrenme çıktısı değildir. Ürünün en gelişmiş bir model kullandığını söylemek, belirli bir yanıtın iyi notlandırıldığını, bir yanlış kavramanın tespit edildiğini veya sıradaki sorunun uygun olduğunu kanıtlamaz. Bu nedenle Robotutor, model kimliğini bir uygulama bağlamı olarak ele alır; öğrenci deneyimine ilişkin kanıtın yerine geçen bir şey olarak görmez.

• En iyi, en akıllı veya en güçlü gibi sıfatlar yerine görünür öğrenme döngüsüne ilişkin iddiaları tercih edin.
• Dağıtılmış yönlendirme ve yetkilendirmeler erişimi kanıtlamadıkça adı belirli bir modele erişim sözü vermeyin.
• Modele özgü iddiaları, kalıcı ana sayfa metninde değil, tarihli kaynak veya duyuru sayfalarında tutun.

Yayımlamadan önce bir iddia defteri kullanın

Esaslı her herkese açık iddianın dört kanıtı olmalıdır: tam cümle, onu destekleyen uygulama veya yapılandırma, iddia bir satıcıyı ya da araştırma sonucunu ilgilendiriyorsa harici bir kaynak ve kaynak değiştiğinde iddiayı yeniden ele alacak bir sahip. Sahibi olmayan bir iddia, bir zamanlar doğru olsa bile eskir.

Örneğin yanıtların yapay zekâ tarafından notlandırıldığı ifadesi, yanıt değerlendirme yoluna ve bir tarayıcı gösterimine bağlanabilir. Adı belirli bir modelin abonelere sunulduğu ifadesi ise daha fazlasını gerektirir: dağıtılmış sağlayıcı yapılandırması, faturalandırma yetkilendirme yolu ve sağlayıcının güncel model belgelerinin hepsinin birbiriyle uyuşması gerekir.

• Ürün kanıtı: yol, yapılandırma, değerlendirme veya yeniden üretilebilir arayüz davranışı.
• Harici kanıt: birincil araştırma, standart kuruluşu veya resmî sağlayıcı belgeleri.
• İnceleme tetikleyicisi: sağlayıcı değişikliği, yönlendirme değişikliği, fiyat değişikliği veya çelişen değerlendirme kanıtı.
• Yedek ifade: bir model adı çıkarılsa bile doğru kalan, sağlayıcıdan bağımsız bir cümle.

Yeteneği güvenilirlikten ayırın

Bir model güçlü genel yetenek gösterebilir ve yine de yanlış bir açıklama üretebilir, belirsiz bir soruyu gözden kaçırabilir veya bir öğrenci yanıtına yanlış ölçüt uygulayabilir. Robotutor sistemi otomatik ve yanılabilir olarak tanımlamalı, kıyaslama sonuçlarını tek tek derslere ilişkin garantilere dönüştürmemelidir.

Güvenilirlik, modelin çevresindeki çerçeveden gelir: temellendirilmiş bağlam, açık notlandırma ölçütleri, yapılandırılmış çıktılar, uygun yerlerde yeniden denemeler, değerlendirme paketleri, öğrenci geri bildirimi ve ürün sınırları. Herkese açık metin bu ayrımı görünür kılmalıdır; böylece okuyucular öğrenme sisteminin bir model adından fazlası olduğunu ve önemli yanıtların neden yine de bağımsız doğrulama gerektirdiğini anlar.

Adı belirtilen model ifadelerini düzenli olarak gözden geçirin

Adı belirtilen model sayfaları bir inceleme tarihi taşımalı ve sağlayıcının güncel belgelerine işaret eden bağlantılar kullanmalıdır. Bir model kullanımdan kaldırıldığında, yeniden adlandırıldığında veya değiştirildiğinde sayfa ya özlü bir açıklamayla güncellenmeli ya da adı belirtilen iddia kaldırılmalıdır. Kanıtı değiştirmeden yalnızca tarihi değiştirmek, sayfaya değer katmadan onu daha güncel gösterir.

Kalıcı taahhüt, görev için ürünün kalite çıtasını karşılayan modelleri kullanmaktır. Gözden geçirilebilir kısım ise hangi sağlayıcının ve modelin şu anda bu çıtayı karşıladığıdır. Bu çerçeve, ürünün gelişmesine olanak tanır ve her altyapı değişikliğini bozulmuş bir pazarlama vaadine dönüştürmez.

Yayımlama öncesi pratik bir kontrol

Bir model iddiasını yayımlamadan önce onu şüpheci bir öğrenci olarak okuyun. Cümlenin makul bir kişiyi neyi beklemeye yönlendireceğini, bu beklentinin mevcut üründe yeniden üretilip üretilemeyeceğini ve hangi kanıtın onu çürüteceğini sorun. Yanıt, okuyucuların inceleyemeyeceği dahili bilgilere bağlıysa iddiayı daraltın ve sınırlamayı açıklayın.

• Bir kullanıcı iddia edilen davranışı bugün gözlemleyebilir mi?
• Kaynak güncel, resmî ve bağlantılı mı?
• İfade, olasılığı garantiden ayırıyor mu?
• İfade, bir sağlayıcı kesintisi veya yönlendirme yedeği sırasında dürüst kalır mı?
• Editoryal politika üzerinden açık bir düzeltme yolu var mı?