Iteration 3: Modell- und Modusraster erweitert, Skill 7.0.0, V2/V3 vorbereitet
Neue gueltige Zellen in Iteration 3 - claude-opus-5/solo/high: 363 Anforderungen, 99,7 % mit Primaerbeleg, Belege je Anforderung Median 2,0, 38,1 Mio. Tokens - claude-fable-5/solo/high: 241 Anforderungen, 98,3 % mit Primaerbeleg, 89,0 % PRIMAER-Anteil, vollstaendig regelkonform, 30,6 Mio. Tokens Damit sind 6 von 12 Zellen des Rasters belegt. Zwei Befunde daraus: Die Belegdichte folgt dem Modell, nicht dem Effort. Opus erreicht Median 2,0 auch auf high; alle 44 Sonnet-Laeufe lagen bei 1,0. max hebt Opus auf 3,0. Die frueher dem Effort zugeschriebene Verdopplung ist damit eingegrenzt. Die Fable-Modellverletzung ist reproduziert und abgegrenzt. Bei builtin laufen die Subagenten auf claude-opus-5[1m] statt Fable (zweiter Fall nach Iteration 1), bei solo dagegen sauber. Nicht das Modell ist die Ursache, sondern Fable in Kombination mit Delegation. Fehlmessungen, vollstaendig protokolliert - vier 429-Abbrueche (Session-Kontingent) aus dem Parallelblock 19:59; drei davon mit Teilbestand, einer ohne Ergebnis - opus-5/builtin/high zum dritten Mal gescheitert: 790,7 Mio. Tokens ueber drei Anlaeufe ohne Artefakt. Zelle mit dieser Prompt-Version nicht messbar. Skill 7.0.0 (MAJOR) - Isolationsmechanismus modusabhaengig: --safe-mode schaltet MCP-Server und Custom-Agenten ab und ist mit V2/V3 unvereinbar. Smoke-Test verifiziert: mit Flag spawned=0, ohne Flag spawned=2. Ersatz fuer custom/MCP: --strict-mcp-config plus --disallowedTools Skill WebSearch WebFetch SlashCommand. - 6.1.0: Pflichtpruefung leeres Ergebnisverzeichnis = Fehlmessung unabhaengig von is_error; CLAUDE_CODE_PRINT_BG_WAIT_CEILING_MS=0; Protokollfeld Gueltigkeit - extract-subagenten.py: Start-Quittung wird nicht mehr als Ertragsmass ausgewiesen Versuch 2 und 3 vorbereitet - Prompt-Kette V1 -> V2 (02-A, angepasst an Agentendateien) -> V3 (02-B, MCP) - V2: acht Rollen inkl. nicht delegierendem ISO-29148-Orchestrator - V3: elf Rollen, fuenf Werkzeugserver, neue Belegklasse LAUFZEIT Ablaufprotokoll um Phase 6 und 7 sowie die Vorbereitung von V2/V3 ergaenzt. Co-Authored-By: Claude Opus 5 (1M context) <noreply@anthropic.com>
This commit is contained in:
co-authored by
Claude Opus 5
parent
affde3a45f
commit
3d5b691bfa
@@ -64,6 +64,10 @@ for a in aufrufe:
|
||||
txt = ergebnisse.get(a['id']) or ''
|
||||
a['ergebnis_zeichen'] = len(txt)
|
||||
a['abgewiesen'] = ABSAGE in txt
|
||||
# Ein im Hintergrund gestarteter Subagent liefert sofort eine Start-Quittung
|
||||
# ('Async agent launched successfully'), nicht seine Befunde. Ihre Laenge ist
|
||||
# KEIN Ertragsmass - sie ist fuer alle Hintergrund-Subagenten praktisch gleich.
|
||||
a['nur_startquittung'] = 'Async agent launched successfully' in txt
|
||||
|
||||
abgewiesen = [a for a in aufrufe if a['abgewiesen']]
|
||||
echte = [a for a in aufrufe if not a['abgewiesen']]
|
||||
@@ -102,8 +106,11 @@ for i, a in enumerate(echte, 1):
|
||||
'',
|
||||
'- **Werkzeug:** `%s` **Typ:** `%s` **Hintergrund:** %s'
|
||||
% (a['werkzeug'], a['subagent_type'], a['run_in_background']),
|
||||
'- **Prompt-Zeichen:** %d **Ergebnis-Zeichen:** %s'
|
||||
% (len(a['prompt']), a['ergebnis_zeichen']),
|
||||
'- **Prompt-Zeichen:** %d **Rueckgabe:** %s'
|
||||
% (len(a['prompt']),
|
||||
'Start-Quittung (Befunde kommen per Benachrichtigung, nicht als '
|
||||
'Werkzeugergebnis - Laenge ist kein Ertragsmass)'
|
||||
if a.get('nur_startquittung') else '%s Zeichen' % a['ergebnis_zeichen']),
|
||||
'', '### Prompt', '', '```', a['prompt'].rstrip(), '```', '']
|
||||
io.open(os.path.join(meta, 'subagenten.md'), 'w', encoding='utf-8').write('\n'.join(md))
|
||||
|
||||
@@ -111,6 +118,8 @@ print('Subagenten gefunden: %d echte%s (direkt erwartet: %s, gesamt: %s, davon v
|
||||
% (len(echte), (', %d abgewiesen' % len(abgewiesen)) if abgewiesen else '',
|
||||
erwartet, gesamt, verschachtelt))
|
||||
for a in echte:
|
||||
print(' - %-42s %s Prompt %6d Z. Ergebnis %s Z.'
|
||||
% ((a['description'] or '')[:42], a['subagent_type'], len(a['prompt']), a['ergebnis_zeichen']))
|
||||
print(' - %-42s %-16s Prompt %6d Z. %s'
|
||||
% ((a['description'] or '')[:42], a['subagent_type'], len(a['prompt']),
|
||||
'Hintergrund (Start-Quittung)' if a.get('nur_startquittung')
|
||||
else 'Ergebnis %s Z.' % a['ergebnis_zeichen']))
|
||||
print('geschrieben:', os.path.join(meta, 'subagenten.md'))
|
||||
|
||||
Reference in New Issue
Block a user