Jegyzetek a modellek képességeiről a nyilvános állításokhoz

Induljon a megfigyelhető terméktulajdonságokból

A kezdőoldal szövegének olyan viselkedést kell leírnia, amelyet a tanuló ellenőrizni tud: a rendszer kérdést tesz fel, értékeli a választ, elmagyarázza, mi tűnik szilárdnak vagy törékenynek, és kiválasztja a következő lépést. Ezek az állítások akkor is hasznosak maradnak, ha az alapul szolgáló szolgáltató vagy modellverzió megváltozik.

A szolgáltató neve nem tanulási eredmény. Attól, hogy a termék élvonalbeli modellt használ, még nem bizonyított, hogy egy adott választ jól értékeltek, hogy egy tévképzetet felismertek, vagy hogy a következő kérdés megfelelő volt. A Robotutor ezért a modell azonosságát megvalósítási háttérnek tekinti, nem pedig a tanulói élményre vonatkozó bizonyíték helyettesítőjének.

• Részesítse előnyben a látható tanulási ciklusra vonatkozó állításokat az olyan jelzőkkel szemben, mint a legjobb, legokosabb vagy legerősebb.
• Ne ígérjen hozzáférést megnevezett modellhez, hacsak az éles útválasztás és a jogosultságok nem bizonyítják ezt a hozzáférést.
• A modellspecifikus állításokat keltezett forrás- vagy közleményoldalakon tartsa, ne az időtálló főoldali szövegben.

Közzététel előtt használjon állításnaplót

Minden lényeges nyilvános állításhoz négy bizonyítéknak kell tartoznia: a pontos mondatnak, az azt alátámasztó megvalósításnak vagy konfigurációnak, külső forrásnak, ha az állítás szolgáltatóra vagy kutatási eredményre vonatkozik, és egy felelősnek, aki újra átnézi, ha a forrás megváltozik. A felelős nélküli állítás elavul, még ha egykor pontos volt is.

Például az a kijelentés, hogy a válaszokat MI értékeli, összekapcsolható a válaszértékelési útvonallal és egy böngészős bemutatóval. Annak kijelentéséhez, hogy egy megnevezett modell elérhető az előfizetők számára, több kell: az éles szolgáltatói konfigurációnak, a számlázási jogosultsági útvonalnak és a szolgáltató aktuális modelldokumentációjának egyeznie kell.

• Termékbizonyíték: útvonal, konfiguráció, értékelés vagy reprodukálható felhasználói felületi viselkedés.
• Külső bizonyíték: elsődleges kutatás, szabványügyi szervezet vagy a szolgáltató hivatalos dokumentációja.
• Felülvizsgálati kiváltó ok: szolgáltatóváltás, útválasztás-változás, árváltozás vagy ellentmondó értékelési bizonyíték.
• Tartalék megfogalmazás: szolgáltatósemleges mondat, amely akkor is igaz marad, ha a modell nevét eltávolítjuk.

Válassza külön a képességet és a megbízhatóságot

Egy modell mutathat erős általános képességet, és közben mégis hibás magyarázatot adhat, elnézhet egy kétértelmű kérdést, vagy rossz értékelési szempontrendszert alkalmazhat a tanuló válaszára. A Robotutornak a rendszert automatikusnak és tévedhetőnek kell leírnia, és a teljesítménytesztek eredményeit nem szabad egyes leckékre vonatkozó garanciákká alakítania.

A megbízhatóság a modell körüli keretrendszerből ered: megalapozott kontextusból, kifejezett értékelési szempontokból, strukturált kimenetekből, adott esetben újrapróbálkozásokból, értékelési csomagokból, tanulói visszajelzésekből és termékkorlátokból. A nyilvános szövegnek láthatóvá kell tennie ezt a különbséget, hogy az olvasók megértsék, miért több a tanulási rendszer egy modellnévnél, és miért van szükség a fontos válaszok önálló ellenőrzésére is.

A megnevezett modellekre vonatkozó állításokat ütemezetten vizsgálja felül

A megnevezett modelleket tárgyaló oldalaknak felülvizsgálati dátumot kell viselniük, és olyan hivatkozásokat kell használniuk, amelyek a szolgáltató aktuális dokumentációjára mutatnak. Amikor egy modellt kivonnak, átneveznek vagy lecserélnek, az oldalt érdemi magyarázattal frissíteni kell, vagy a megnevezett állítást el kell távolítani. Ha csak a dátumot módosítjuk a bizonyíték megváltoztatása nélkül, az oldal frissebbnek látszana anélkül, hogy értéket adna hozzá.

A stabil vállalás az, hogy a feladatra olyan modelleket használunk, amelyek megfelelnek a termék minőségi követelményének. A módosítható rész az, hogy jelenleg melyik szolgáltató és modell felel meg ennek a követelménynek. Ez a megközelítés lehetővé teszi, hogy a termék fejlődjön anélkül, hogy minden infrastruktúra-változás megszegett marketingígéretté válna.

Gyakorlati ellenőrzés közzététel előtt

A modellre vonatkozó állítás közzététele előtt olvassa el kétkedő tanulóként. Kérdezze meg, mit várna egy észszerű ember a mondat alapján, reprodukálható-e ez az elvárás a jelenlegi termékben, és mi cáfolná meg. Ha a válasz olyan belső információtól függ, amelyet az olvasók nem tudnak megvizsgálni, szűkítse az állítást, és magyarázza el a korlátot.

• Megfigyelheti-e egy felhasználó ma az állított viselkedést?
• Aktuális, hivatalos és hivatkozott-e a forrás?
• Megkülönbözteti-e a megfogalmazás a lehetőséget a garanciától?
• Őszinte maradna-e a kijelentés szolgáltatói kimaradás vagy útválasztási tartalék esetén?
• Van-e világos helyesbítési út a szerkesztési irányelveken keresztül?