Ein geübter Rückgabeausdruck gelernt, unbekannte Aufgaben bleiben null
Der dritte kontrollierte MBPP-Lernversuch ist abgeschlossen. Erstmals wurde eine geübte Aufgabe nach dem Lernen richtig gelöst: 0 von 4 wurden zu 1 von 4. Auf den vier vollständig getrennten Aufgaben blieb das Ergebnis jedoch bei 0 von 4. Das ist ein kleiner Merkeffekt innerhalb der Lernmenge, noch kein Nachweis für übertragbares Python-Verständnis und keine Spezialistenabnahme.
Diesmal waren die bekannte Funktionszeile und die Rückgabeanweisung fest vorgegeben. Das Modell musste nur den abschließenden Ausdruck erzeugen. Bei zwei der acht Aufgaben gehörte zusätzlich eine bereits bekannte Zuweisung zum festen Rahmen. Vier Aufgaben wurden je achtmal gelernt; vier andere Aufgaben blieben vollständig vom Training getrennt. Keine Testlösung wurde in die Eingabe übernommen.
Vor dem Lernen waren alle acht Antworten syntaktisch unbrauchbar und keine Aufgabe bestand. Nach den 32 Lernschritten waren drei von acht Antworten syntaktisch verwendbar. Genau eine geübte Aufgabe entsprach der Referenz und bestand alle drei Tests. Die vier unbekannten Aufgaben bestanden zusammen 0 von 12 Tests. Insgesamt wurden 3 von 24 deklarierten Tests bestanden.
Der Trainingsverlust fiel vom ersten zum letzten Schritt von 4,469 auf 0,337. Das entspricht einem Rückgang um rund 92,5 Prozent. Die acht Nachherantworten dauerten zusammen rund 156,5 Sekunden statt zuvor 713,8 Sekunden. Alle acht waren innerhalb von 30 Sekunden fertig; die langsamste dauerte 28,35 Sekunden.
Auf node6 wurden 32 tatsächliche Lernschritte auf der Intel-iGPU gerechnet. Der Optimierer wurde vollständig von Schritt 264 bis 296 fortgeführt; beide Adam-Zustände blieben erhalten. Das Grundmodell blieb unverändert. Es gab keinen GPU-Neustart, alle eigenen Prozesse sind beendet und die normale Kühlung ist wiederhergestellt.
Die 500 offiziellen MBPP-Testaufgaben blieben unangetastet und wurden nicht ausgeführt. Der frühere 30-Aufgaben-Vergleich bleibt bei 0/30 richtigen Modellantworten gegenüber 22/30 festen Reparaturregeln.
Die engere Ausgabeform hat damit einen klaren Unterschied sichtbar gemacht: Das Zusatzmodul kann wenigstens eine sehr kurze geübte Antwort speichern. Es überträgt dieses Gelernte aber noch nicht auf die getrennten Aufgaben. Als nächster Lernschritt braucht es mehr unterschiedliche, kurze Lernbeispiele bei unveränderter getrennter Prüfung. Erst ein Anstieg auf den unbekannten Aufgaben rechtfertigt den erneuten 30-Aufgaben-Vergleich.
Es ist weiterhin nicht bewiesen, dass das Modell mit 8,52 Millionen Parametern grundsätzlich zu klein ist. Bleibt die Übertragung auch mit einem breiteren, sauber getrennten Lernpaket aus, wird ein identischer Vergleich mit einer größeren, von Grund auf trainierten Basis erforderlich.
Belegstand: 17. September 2026, 11:07 Uhr Zürich. Gewichte, Aufgaben, Referenzlösungen und Rohantworten bleiben privat; veröffentlicht werden nur unabhängig geprüfte Summen und Prüfsummen.