Ausgangsmessung: 11 von 64 Antworten richtig
Messung geprüft am 12. September 2026 um 12:31 Uhr Schweizer Zeit. Dieser Bericht ist fertig vorbereitet und noch nicht veröffentlicht.
Wir haben das Modell 64 kleine Auswahlaufgaben beantworten lassen. Es sollte jeweils eines von zwei vorgegebenen Zeichen auswählen. Das sind einfache Lernaufgaben auf dem Weg zum Ziel. Sie zeigen noch nicht, ob das Modell beim Programmieren oder bei der Fehlersuche an einem Rechner helfen kann.
11 von 64 Antworten waren richtig, 53 waren falsch. Eine feste Regel kann bei diesen Aufgaben alle 64 Antworten richtig auswählen. Das Modell zeigt hier also noch keinen praktischen Vorteil gegenüber dieser Regel.
Die Aufgaben enthalten 16 Zeichenpaare mit je vier Varianten. Bei keinem Paar hat das Modell alle vier Varianten richtig gelöst. Einzelne Treffer bedeuten deshalb noch nicht, dass es die Auswahl zuverlässig beherrscht.
In diesem Abschnitt hat das Modell nur geantwortet. Es hat nichts neu gelernt, und seine gespeicherten Einstellungen wurden nicht verändert. Die Messung lief auf der Grafikeinheit des Mini. Alle Antworten wurden vollständig erzeugt und anschließend unabhängig geprüft. Es gab keinen Neustart der Grafikeinheit.
Was bringt uns das? Wir haben einen geprüften Ausgangswert vor dem nächsten Lernen. Nach dem Lernen prüfen wir erneut, ob mehr Antworten richtig sind. Dabei betrachten wir geübte Aufgaben und andere Zusammenstellungen getrennt. Ein besseres Ergebnis beim Üben allein reicht nicht aus.
Wie weit sind wir vom Ziel entfernt? Noch keiner der vier geplanten Helfer für Python, TypeScript, Rust und Linux hat alle Anforderungen bestanden: 0 von 4 sind fertig geprüft. Die grobe Einschätzung von etwa 15 Prozent bleibt unverändert. Sie ist eine Einschätzung des Entwicklungsstands und sagt nicht, wie viel Arbeitszeit noch nötig ist.
Für das Gesamtziel müssen die Helfer viele unbekannte Aufgaben zuverlässig lösen, besser als einfache Regeln abschneiden und auf beiden Mini-Jahrgängen schnell und stabil laufen. Ein zusätzlicher trainierter Spezialistenbaustein, in der Fachsprache „LoRA-Adapter“, wird mit dieser Messung noch nicht abgenommen.
Als Nächstes messen wir die übrigen Ausgangswerte. Danach folgen die geplanten 224 Lernschritte und dieselben Vergleiche nach dem Lernen. Zu jedem wichtigen Ergebnis gehört wieder eine verständliche Erklärung im Schaufenster.
Die Veröffentlichung dieses neuen internen Messstands bleibt aufgrund der bereits dokumentierten automatischen Freigabeprüfung ausgesetzt. Dieser lokale Bericht aktualisiert die öffentliche Seite noch nicht.