Skip to content

docs(showcase): evidence page with measured, reproducible figures (#76) - #107

Open
Fluory wants to merge 3 commits into
mainfrom
claude/docs-evidence-76
Open

Fluory wants to merge 3 commits into
mainfrom
claude/docs-evidence-76

Conversation

@Fluory

@Fluory Fluory commented Oct 2, 2026 •

Copy link
Copy Markdown
Owner

Warum

Fixes #76 · Showcase-Review 2026-09-27, P1 Punkt 4 (Epic #19) · Umfang laut Entscheidung des Orchestrators vom 2026-09-28: veröffentlichen, was messbar ist; Bearbeitungszeit ausdrücklich „noch nicht gemessen“.

Arbeitsstand

  • Ziel: Ein paar überprüfbare Zahlen statt Adjektiven, mit Methode, Stichprobengröße und Grenzen.
  • Nicht-Ziele: KPI-Dashboard in der App; Zeitmessung; öffentliche Fallstudien-Seite (docs(showcase): public case study page with a guided entry to the sample request #75).
  • Erledigt: docs/product/evidence.md (Eval-Genauigkeit je Schlüsselfeld, reproduziert mit pnpm evals; Zustand beider Musterfälle aus den Aufzeichnungen gezählt; drei Kernentscheidungen mit Links auf ADR-0001; Grenzen), Link im README, CHANGELOG; frischer Review (Faktencheck) eingearbeitet; CI grün.
  • Offen: Review/Merge durch den Orchestrator.
  • Annahmen: „Korrekturen“ der Musterfälle sind nicht gemessen (keine echten Testnutzer) – die Seite nennt stattdessen, was die Prüfansicht einer Person vorlegt.
  • Nächster kleinster Schritt: Review und Merge.

Was ist passiert (Klartext)

Es gibt jetzt eine Seite mit nachprüfbaren Zahlen: wie genau die Verarbeitung je Feld auf 15 synthetischen Testfällen arbeitet, was bei den zwei Musteranfragen erkannt wurde und was eine Person noch entscheiden muss, und welche drei Entscheidungen das Produkt tragen. Jede Zahl ist als synthetisch gekennzeichnet und lässt sich mit einem Befehl nachrechnen. Wichtig und ehrlich benannt: Die Testfälle nutzen vorbereitete KI-Antworten – sie messen, wie gut unsere Prüfung arbeitet, nicht wie gut ein Live-Modell ist. Die Zeitersparnis ist noch nicht gemessen und wird deshalb auch nicht behauptet.

Plan-Pflicht (SYSTEM.md §4)

  • Kein Auslöser – keine Modulgrenze, öffentliche API, Migration, Auth/Rechte, kein Zahlungs-/Daten-/Infrapfad, höchstens zwei Module, keine Architekturvarianten, umkehrbar
  • Auslöser zutreffend – Impact Manifest ausgefüllt (Plan vor Code)

Geändert

Nachweis (SYSTEM.md §11)

Doku-Entscheidung (genau eine)

Entferntes oder Umbenanntes: nichts entfernt

Dateigrößen und neue Bausteine (SYSTEM.md §7)

Dateien über 500 Zeilen im Diff (Ausnahmen: generierter Code, Lockfiles, Fixtures, Migrationen, Schemas, Ressourcen, Doku, Konfiguration):

  • keine
  • bewusst belassen – Begründung: –
  • im selben PR nach fachlicher Verantwortung geteilt
  • Folge-Issue –

Über 800 Zeilen mit neuer Fachlogik oder über 1000 Zeilen (P1/P2): nicht betroffen

Neue Shared-Komponente, Utility-Datei, Adapter oder fachlicher Service:

  • nein
  • ja – gesucht nach: –

Subagent-Einsätze

  • 1 × frischer Review (read-only, Sonnet, Faktencheck) – nichts blockierend, 5 should + 2 nits; Umgang im PR-Kommentar.

Risiken / offene Punkte

  • Die Zahlen veralten, wenn sich die Baseline ändert – die Seite nennt Befehl und Commits, damit das prüfbar bleibt.

🤖 Generated with Claude Code

https://claude.ai/code/session_01DJ5vaKvTYiMvdngT4d3xo1

claude added 2 commits October 2, 2026 08:26
Eval accuracy per key field from the committed baseline (replay, 15
synthetic cases), the recorded state of both sample requests, three key
decisions and the limits; handling time marked as not yet measured, as
decided by the orchestrator on 2026-09-28.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Claude-Session: https://claude.ai/code/session_01DJ5vaKvTYiMvdngT4d3xo1
@vercel

vercel Bot commented Oct 2, 2026 •

Copy link
Copy Markdown

The latest updates on your projects. Learn more about Vercel for GitHub.

Project Deployment Actions Updated
requestflow Canceled Canceled Oct 2, 2026 8:37am UTC
requestflow-ai Error Error Oct 2, 2026 8:37am UTC

…s, ADR links (#107 review)

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Claude-Session: https://claude.ai/code/session_01DJ5vaKvTYiMvdngT4d3xo1

Fluory commented Oct 2, 2026

Copy link
Copy Markdown
Owner Author

Frischer Review (read-only Subagent, Faktencheck) – Ergebnis und Umgang

Nichts blockierend. Bestätigt: alle Tabellenwerte = baseline.json; Metriknamen = README; Musterfälle (Werk Ost 4/1/1 + 15 Positionswerte, Pumpe 6/0/0 + 10) = Aufzeichnungen, kein unverified; Zwecke review/exported = samples.ts; Modell und Prompt = run-Metadaten; D7/D8/D9 und die Injection-Aussage stimmen; kein Überclaim beim Beitrag.

Befund Umgang
should – n=29 für alle Positionszeilen, Nenner teils 28 behoben: n = Größe des Testsatzes, Nenner je Rate erklärt (Werkstoff/Maße: 28)
should – Werkstoff „Missing detected“ als „–“, Baseline sagt 0 % behoben: 0 %, mit Hinweis auf sehr wenige Beobachtungen
should – 606caec las sich wie vom 2026-10-02 behoben: Laufdatum 2026-10-02, Commit gemergt 2026-09-28
should – Werk-Ost-Aufzeichnung stammt aus 18eab97 behoben: beide Commits genannt
should – keine Links zu ADR-0001 (Akzeptanzkriterium) behoben: Links auf ADR-0001 und die Abschnitte D7, D8, D9
nit – Gate-Bedingungen vereinfacht behoben: Fallfehler und geänderter Fallsatz ergänzt
nit – „Eigener Beitrag“ knapp bleibt: ehrlich und ohne Überclaim

scripts/doku-check.sh grün.


Generated by Claude Code

This branch had an error being deployed

1 failed and 1 active deployments
Preview – requestflow-ai — 4aeea63f Deployed Oct 2, 2026 by vercel[bot]
Preview – requestflow — 4aeea63f Deployed Oct 2, 2026 by vercel[bot]
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

docs(showcase): publish measured evidence – field accuracy, corrections, handling time

2 participants