Hinweise zur Modellfähigkeit für öffentliche Aussagen

Mit beobachtbarem Produktverhalten beginnen

Der Text der Startseite sollte Verhalten beschreiben, das Lernende überprüfen können: Das System stellt eine Frage, bewertet die Antwort, erklärt, was tragfähig oder brüchig erscheint, und wählt den nächsten Schritt. Diese Aussagen bleiben nützlich, auch wenn sich der zugrunde liegende Anbieter oder die Modellversion ändert.

Ein Anbietername ist kein Lernergebnis. Zu sagen, das Produkt nutze ein führendes Modell, beweist weder, dass eine bestimmte Antwort gut bewertet wurde, noch dass ein Missverständnis erkannt wurde oder dass die nächste Frage angemessen war. Robotutor behandelt die Identität des Modells daher als Umsetzungskontext und nicht als Ersatz für Belege zur Erfahrung der Lernenden.

• Aussagen über den sichtbaren Lernzyklus sind Adjektiven wie beste, klügste oder leistungsstärkste vorzuziehen.
• Versprich keinen Zugang zu einem benannten Modell, sofern nicht das eingesetzte Routing und die Berechtigungen diesen Zugang belegen.
• Modellspezifische Aussagen gehören auf datierte Ressourcen- oder Ankündigungsseiten und nicht in dauerhafte Haupttexte.

Vor der Veröffentlichung ein Aussagenregister nutzen

Jede wesentliche öffentliche Aussage sollte vier Belege haben: den genauen Satz, die Umsetzung oder Konfiguration, die ihn stützt, eine externe Quelle, wenn die Aussage ein Ergebnis eines Anbieters oder der Forschung betrifft, und eine verantwortliche Person, die sie erneut prüft, wenn sich die Quelle ändert. Eine Aussage ohne verantwortliche Person veraltet, auch wenn sie einmal zutreffend war.

So lässt sich etwa die Aussage, Antworten würden von einer KI bewertet, an die Route zur Antwortbewertung und eine Demonstration im Browser knüpfen. Die Aussage, ein benanntes Modell stehe Abonnenten zur Verfügung, erfordert mehr: Die eingesetzte Anbieterkonfiguration, der Berechtigungspfad der Abrechnung und die aktuelle Modelldokumentation des Anbieters müssen übereinstimmen.

• Produktbeleg: Route, Konfiguration, Evaluierung oder reproduzierbares Verhalten der Oberfläche.
• Externer Beleg: Primärforschung, Normungsstelle oder offizielle Dokumentation des Anbieters.
• Anlass zur Überprüfung: Anbieterwechsel, Routingänderung, Preisänderung oder widersprüchliche Evaluierungsbelege.
• Ausweichformulierung: ein anbieterneutraler Satz, der wahr bleibt, wenn ein Modellname entfällt.

Fähigkeit von Zuverlässigkeit trennen

Ein Modell kann starke allgemeine Fähigkeiten zeigen und dennoch eine falsche Erklärung liefern, eine mehrdeutige Frage übersehen oder das falsche Bewertungsraster auf die Antwort einer lernenden Person anwenden. Robotutor sollte das System als automatisiert und fehlbar beschreiben und Benchmark-Ergebnisse nicht in Garantien für eine einzelne Lektion umdeuten.

Zuverlässigkeit entsteht durch den Rahmen um das Modell: fundierter Kontext, ausdrückliche Bewertungskriterien, strukturierte Ausgaben, gegebenenfalls Wiederholungsversuche, Evaluierungssuiten, Feedback der Lernenden und Produktgrenzen. Öffentliche Texte sollten diese Unterscheidung sichtbar machen, damit Leser verstehen, warum das Lernsystem mehr ist als ein Modellname und warum wichtige Antworten weiterhin unabhängig überprüft werden müssen.

Aussagen zu benannten Modellen regelmäßig prüfen

Seiten zu benannten Modellen sollten ein Prüfdatum tragen und Links verwenden, die auf die aktuelle Dokumentation des Anbieters verweisen. Wird ein Modell eingestellt, umbenannt oder ersetzt, sollte die Seite entweder mit einer inhaltlichen Erklärung aktualisiert oder die Aussage zum benannten Modell entfernt werden. Nur das Datum zu ändern, ohne die Belege zu ändern, ließe die Seite aktueller erscheinen, ohne einen Mehrwert zu liefern.

Die stabile Verpflichtung besteht darin, Modelle zu verwenden, die den Qualitätsanspruch des Produkts für die jeweilige Aufgabe erfüllen. Veränderlich ist, welcher Anbieter und welches Modell diesen Anspruch derzeit erfüllen. Diese Rahmung erlaubt dem Produkt, sich zu verbessern, ohne jede Infrastrukturänderung in ein gebrochenes Marketingversprechen zu verwandeln.

Eine praktische Prüfung vor der Veröffentlichung

Lies eine Aussage über ein Modell vor der Veröffentlichung wie ein skeptischer Lernender. Frage, was der Satz einen vernünftigen Menschen erwarten ließe, ob sich diese Erwartung im aktuellen Produkt nachvollziehen lässt und welche Belege sie widerlegen würden. Hängt die Antwort von internen Informationen ab, die Leser nicht einsehen können, schränke die Aussage ein und erkläre die Begrenzung.

• Kann ein Nutzer das behauptete Verhalten heute beobachten?
• Ist die Quelle aktuell, offiziell und verlinkt?
• Unterscheidet die Formulierung zwischen Möglichkeit und Garantie?
• Bliebe die Aussage bei einem Ausfall des Anbieters oder einem Routing-Fallback ehrlich?
• Gibt es über die Redaktionsrichtlinie einen klaren Korrekturweg?