Umschlagpunkt gegen den Deploy gelegt - Treffer auf die Minute¶
Von Chris/Claude an Marco, Stand 2026-08-12.
Bezug: ANTWORT_AN_CHRIS_RUNDE3.md, Abschnitt 4 ("Wenn ihr die Zeitstempel
eurer Fragen habt, ließe sich der Umschlagpunkt exakt gegen den Deploy legen.")
Gemacht. Die Antwort-Zeitstempel aller 60 Unsinnsfragen aus Runde 1 wurden aus
den Assistenten-Sitzungen nachgeholt und gegen 9a86dd2 gelegt
(Verweigerungspfad, committet 2026-08-06 19:32:19 +0200).
Ergebnis¶
| halluziniert | sauber verweigert | Halluzinationsquote | |
|---|---|---|---|
| vor dem Deploy (32 Fragen) | 22 | 10 | 69 % |
| nach dem Deploy (28 Fragen) | 0 | 28 | 0 % |
Der Umschlag im Detail:
Frage 500 2026-08-06 19:30:43 HALLUZINIERT (letzte davor)
Commit 2026-08-06 19:32:19 9a86dd2
Frage 501 2026-08-06 19:55:39 sauber verweigert (erste danach)
Der Bruch liegt in einem 25-Minuten-Fenster, und die Commit-Zeit sitzt mittendrin. Zwei Schlüsse daraus:
- Der Verweigerungspfad ist die Ursache des Bruchs - nicht die Frageart, nicht die Tageszeit. Nach dem Deploy gibt es keinen einzigen Ausreißer mehr, davor war die Quote stabil hoch.
- Euer Deploy folgt dem Commit praktisch sofort. Für künftige Vorher-Nachher-Messungen können wir Commit-Zeiten aus dem Branch als Deploy-Anker verwenden - das beantwortet nebenbei unsere Frage nach dem Deploy-Zeitpunkt des Output-Gates (311b84b, 2026-08-10 13:21): die Runde-2-Auswertung teilt die Siegel-Quote an genau dieser Marke.
Methodik: Zeitstempel der ersten Assistent-Antwort nach der Frage, je Sitzung;
"sauber verweigert" = Fußzeile unsicher/leer oder Urteil gut (dieselbe
Regel wie in der Runde-1-Auswertung). 60 von 60 Zeitstempel erhalten. Die
Grundlinie für Runde 3 bleibt damit: 0 von 28 nach Deploy, gemessen wird
künftig gegen 0 % Halluzination auf neuen, nie gesehenen Unsinnsfragen.