Zapiski o zmogljivosti modelov za javne trditve

Začnite pri opazljivem delovanju izdelka

Besedilo domače strani naj opisuje vedenje, ki ga učenec lahko preveri: sistem postavi vprašanje, oceni odgovor, pojasni, kaj se zdi trdno in kaj krhko, ter izbere naslednji korak. Te izjave ostanejo uporabne, tudi ko se spremeni ponudnik ali različica modela.

Ime ponudnika ni učni rezultat. Trditev, da izdelek uporablja vrhunski model, ne dokazuje, da je bil določen odgovor dobro ocenjen, da je bila zaznana napačna predstava ali da je bilo naslednje vprašanje ustrezno. Robotutor zato identiteto modela obravnava kot izvedbeni kontekst, ne kot nadomestilo za dokaze o učenčevi izkušnji.

• Dajte prednost trditvam o vidni učni zanki pred pridevniki, kot so najboljši, najpametnejši ali najmočnejši.
• Ne obljubljajte dostopa do imenovanega modela, razen če ga dokazujeta nameščeno usmerjanje in upravičenja.
• Trditve, specifične za model, hranite na datiranih straneh z viri ali objavami, ne v trajnem besedilu na vrhu strani.

Pred objavo uporabite register trditev

Vsaka bistvena javna trditev naj ima štiri dokaze: natančen stavek, izvedbo ali konfiguracijo, ki ga podpira, zunanji vir, kadar trditev zadeva ponudnika ali rezultat raziskave, in lastnika, ki jo bo znova pregledal, ko se vir spremeni. Trditev brez lastnika zastari, tudi če je bila nekoč točna.

Na primer, trditev, da odgovore ocenjuje umetna inteligenca, je mogoče povezati s potjo za ocenjevanje odgovorov in demonstracijo v brskalniku. Trditev, da je imenovani model na voljo naročnikom, zahteva več: nameščena konfiguracija ponudnika, pot obračuna upravičenj in trenutna dokumentacija modela pri ponudniku se morajo ujemati.

• Dokazi o izdelku: pot, konfiguracija, ocenjevanje ali ponovljivo vedenje uporabniškega vmesnika.
• Zunanji dokazi: primarna raziskava, standardizacijski organ ali uradna dokumentacija ponudnika.
• Sprožilec pregleda: sprememba ponudnika, sprememba usmerjanja, sprememba cen ali nasprotujoči si dokazi ocenjevanja.
• Nadomestno besedilo: stavek, neodvisen od ponudnika, ki ostane resničen, če se ime modela odstrani.

Ločite zmogljivost od zanesljivosti

Model lahko izkaže močno splošno zmogljivost in kljub temu poda napačno razlago, spregleda dvoumno vprašanje ali na učenčev odgovor uporabi napačna merila. Robotutor naj sistem opisuje kot samodejen in zmotljiv ter naj rezultatov primerjalnih testov ne spreminja v jamstva za posamezno učno uro.

Zanesljivost izhaja iz okolja okoli modela: utemeljenega konteksta, izrecnih meril ocenjevanja, strukturiranih izhodov, ponovnih poskusov, kjer je primerno, zbirk ocenjevanja, povratnih informacij učencev in omejitev izdelka. Javno besedilo naj to razliko naredi vidno, da bralci razumejo, zakaj je učni sistem več kot ime modela in zakaj pomembni odgovori še vedno zahtevajo neodvisno preverjanje.

Izjave o imenovanih modelih pregledujte po urniku

Strani z imenovanimi modeli naj imajo datum pregleda in povezave na trenutno dokumentacijo ponudnika. Ko je model umaknjen, preimenovan ali zamenjan, je treba stran posodobiti z vsebinsko razlago ali pa imenovano trditev odstraniti. Če bi spremenili samo datum, ne pa dokazov, bi stran videti svežejša, ne da bi dodala vrednost.

Stalna zaveza je uporabljati modele, ki za nalogo dosegajo kakovostno mejo izdelka. Spremenljivi del je, kateri ponudnik in model to mejo trenutno dosegata. Ta okvir omogoča izboljševanje izdelka, ne da bi vsaka sprememba infrastrukture postala prekinjena tržna obljuba.

Praktično preverjanje pred objavo

Preden objavite trditev o modelu, jo preberite kot skeptičen učenec. Vprašajte se, kaj bi stavek razumno osebo spodbudil pričakovati, ali je to pričakovanje mogoče ponoviti v trenutnem izdelku in kateri dokazi bi ga ovrgli. Če odgovor temelji na notranjih informacijah, ki jih bralci ne morejo preveriti, trditev zožite in pojasnite omejitev.

• Ali lahko uporabnik zatrjevano vedenje opazuje danes?
• Ali je vir aktualen, uradni in povezan?
• Ali besedilo loči možnost od jamstva?
• Ali bi izjava ostala poštena med izpadom ponudnika ali nadomestnim usmerjanjem?
• Ali obstaja jasna pot za popravke prek uredniške politike?