Files
chemenu/kb/sources/analyses/Source - LLM Improvements Sonnet Analysis.md
T
torben b138fd8e64
CI / verify (push) Successful in 53s
Release / release (push) Successful in 35s
move: source_type: Default streichen, unclassified als sichtbares Fach, layout: fuer source (schliesst #66)
Files changed:
- CHANGES.md
- VERSION
- instructions/dev/corpus-policy.md
- instructions/wiki-ingest/SKILL.md
- kb/index.md
- kb/log.md
- kb/sources/COLLECTION.md
- kb/sources/INDEX.md
- kb/sources/Source - AMD Powermanagement CPU.md
- kb/sources/Source - Arch Linux Cheat Sheet.md
- kb/sources/Source - Conversation - AGENTS.md Skill Restructuring Session 2026-08-04.md
- kb/sources/Source - Conversation - Auto Mode and Tool Choice Session 2026-08-31.md
- kb/sources/Source - Conversation - Comma Bug Budget Refund and Lint Report Path Session 2026-08-31.md
- kb/sources/Source - Conversation - ENVIRONMENT.md as an Optional Third Session-Level File Session 2026-08-31.md
- kb/sources/Source - Conversation - Gate Counting and Measured Calibration Session 2026-08-31.md
- kb/sources/Source - Conversation - Hardening the Test Suite Against Silent Environment Dependencies Session 2026-08-31.md
- kb/sources/Source - Conversation - Issue Triage Labels and TODO Retirement Session 2026-08-31.md
- kb/sources/Source - Conversation - Nightly Drift-Check Workflow and doctor's Bootstrap Gap Session 2026-08-31.md
- kb/sources/Source - Conversation - Two Round-Trip Defects Found by an Ingest Session 2026-08-31.md
- kb/sources/Source - Conversation - Versioning CI-CD and Content Migration Session 2026-08-30.md
- kb/sources/Source - Conversation - Write-Once Frontmatter Fields and touch --set Session 2026-08-31.md
- kb/sources/Source - Copilot Skill Restructure Instructions.md
- kb/sources/Source - Docker Cheatsheet.md
- kb/sources/Source - Gitea Issue 41 - Issue Management and Label Scheme 2026-09-02.md
- kb/sources/Source - Gitea Issues 62-63 - status-incoming Label Introduction 2026-09-04.md
- kb/sources/Source - LLM Improvements Codex Analysis.md
- kb/sources/Source - LLM Improvements Production Agent Gaps 2026.md
- kb/sources/Source - LLM Improvements Sonnet Analysis.md
- kb/sources/Source - LLM Wiki Pattern.md
- kb/sources/Source - LLM Wiki v2.md
- kb/sources/Source - MCP Read Server Implementation Session 2026-09-02.md
- kb/sources/Source - Private-Instance Merge Correction and Issue 30 Session 2026-09-01.md
- kb/sources/Source - Public Release, Corpus Purge and History Squash Session 2026-09-01.md
- kb/sources/Source - Publish-Remote Gate and Issue Triage Session 2026-09-01.md
- kb/sources/Source - Version Part Nomenclature and Breaking Change Gate Session 2026-09-02.md
- kb/sources/Source - Wine.md
- kb/sources/Source - qmd - GitHub Repository.md
- kb/sources/analyses/Source - Copilot Skill Restructure Instructions.md
- kb/sources/analyses/Source - LLM Improvements Codex Analysis.md
- kb/sources/analyses/Source - LLM Improvements Production Agent Gaps 2026.md
- kb/sources/analyses/Source - LLM Improvements Sonnet Analysis.md
- kb/sources/articles/Source - AMD Powermanagement CPU.md
- kb/sources/articles/Source - LLM Wiki Pattern.md
- kb/sources/articles/Source - LLM Wiki v2.md
- kb/sources/documents/Source - qmd - GitHub Repository.md
- kb/sources/notes/Source - Arch Linux Cheat Sheet.md
- kb/sources/notes/Source - Docker Cheatsheet.md
- kb/sources/notes/Source - Wine.md
- kb/sources/trackers/Source - Gitea Issue 41 - Issue Management and Label Scheme 2026-09-02.md
- kb/sources/trackers/Source - Gitea Issues 62-63 - status-incoming Label Introduction 2026-09-04.md
- kb/sources/transcripts/Source - Conversation - AGENTS.md Skill Restructuring Session 2026-08-04.md
- kb/sources/transcripts/Source - Conversation - Auto Mode and Tool Choice Session 2026-08-31.md
- kb/sources/transcripts/Source - Conversation - Comma Bug Budget Refund and Lint Report Path Session 2026-08-31.md
- kb/sources/transcripts/Source - Conversation - ENVIRONMENT.md as an Optional Third Session-Level File Session 2026-08-31.md
- kb/sources/transcripts/Source - Conversation - Gate Counting and Measured Calibration Session 2026-08-31.md
- kb/sources/transcripts/Source - Conversation - Hardening the Test Suite Against Silent Environment Dependencies Session 2026-08-31.md
- kb/sources/transcripts/Source - Conversation - Issue Triage Labels and TODO Retirement Session 2026-08-31.md
- kb/sources/transcripts/Source - Conversation - Nightly Drift-Check Workflow and doctor's Bootstrap Gap Session 2026-08-31.md
- kb/sources/transcripts/Source - Conversation - Two Round-Trip Defects Found by an Ingest Session 2026-08-31.md
- kb/sources/transcripts/Source - Conversation - Versioning CI-CD and Content Migration Session 2026-08-30.md
- kb/sources/transcripts/Source - Conversation - Write-Once Frontmatter Fields and touch --set Session 2026-08-31.md
- kb/sources/transcripts/Source - MCP Read Server Implementation Session 2026-09-02.md
- kb/sources/transcripts/Source - Private-Instance Merge Correction and Issue 30 Session 2026-09-01.md
- kb/sources/transcripts/Source - Public Release, Corpus Purge and History Squash Session 2026-09-01.md
- kb/sources/transcripts/Source - Publish-Remote Gate and Issue Triage Session 2026-09-01.md
- kb/sources/transcripts/Source - Version Part Nomenclature and Breaking Change Gate Session 2026-09-02.md
- tools/CONTRACT.md
- tools/chemenu/lint_core.py
- tools/chemenu/tests/conftest.py
- tools/chemenu/tests/test_lint.py
- tools/chemenu/tests/test_new_page.py
- tools/chemenu/tests/test_provenance.py
- tools/chemenu/tests/test_touch.py
- tools/chemenu/tests/test_type_resolver.py
- tools/chemenu/tests/test_xref.py
- types/source.md
- types/source.schema.yaml
- types/type-spec.md
- work/reclassify-source-types/README.md
- work/reclassify-source-types/plan.md
2026-09-08 20:38:15 +02:00

66 lines
5.5 KiB
Markdown

---
type: types/source.md
source_type: analysis
author: Sonnet LLM
raw_files: [raw/notes/llm-improvements-sonnet.md]
source_language: en
date: 2026-08-03
tags: [analysis, improvement, wikitool, sonnet, comparison, codex]
entities: [AGENTS.md, wikitool, farzaa gist, awesome-llm-wiki, pascalandy schema]
concepts: [Session Orientation, Semantic Lint Automation, Content Quality Control, Stub Threshold, Split Threshold, Anti-Cramming Heuristic, Checkpoint Audit, Index Scaling, Mass-Update Gate]
summary: Sonnet-Analyse, die AGENTS.md und wikitool mit Farzas Gist und awesome-llm-wiki vergleicht und die Codex-Analyse um konkrete Empfehlungen zu Qualitätsschwellen, Stilrichtlinie, Auditrhythmus und Skalierung ergänzt
---
# Source: LLM Improvements Sonnet Analysis
**Autor:** Sonnet LLM
**Datum:** 2026-08-03
**Quelle:** raw/notes/llm-improvements-sonnet.md
**Typ:** notes
## Zusammenfassung
Diese Quelle dokumentiert eine Analyse des Sonnet LLM, die das aktuelle AGENTS.md-Schema und die wikitool-Implementierung des LLM-Wiki-Repositoriums gegen externe Referenzen vergleicht: Farza's Gist (https://gist.github.com/farzaa/c35ac0cfbeb957788650e36aabea836d) und das awesome-llm-wiki-Repository. Die Analyse dient als Ergänzung zur Codex-Analyse und bietet spezifischere und umsetzbarere Empfehlungen.
Die Sonnet-Analyse kommt zu dem Ergebnis, dass das aktuelle Repository bereits konzeptionell den meisten öffentlichen LLM-Wiki-Implementierungen voraus ist, insbesondere in Bezug auf Nachverfolgung der Herkunft/Zitierung, deterministische CLI-Durchsetzung über wikitool und Konfidenzscoring mit Verfall. Sie identifiziert jedoch sieben konkrete Verbesserungslücken mit realem Nutzen: Seitenlänge/Qualitätsschwellen, Stil-/Tonfibel, Anti-Cramming-Heuristik, Checkpoint-/Audit-Rhythmus, Index-Skalierungsschwellen, Massenpublizierungs-Bestätigungsgate und obligatorisches Sitzungs-Orientierungsprotokoll.
Die Analyse bewertet auch einen Community-Kommentar von „pascalandy" in Farza's Gist, der ein separates „Wiki Schema (Global)" mit einer eigenen Tag-Taxonomie enthält. Während einige Ideen aus diesem Schema nützlich sind, empfiehlt die Analyse, seine vollständige Taxonomie nicht zu übernehmen, da dies mit dem bestehenden entity_type/concept_type/tags-Modell in Konflikt geraten würde.
## Kernaussagen
- **Aktuelle Stärken:** Das Herkunfts- und Zitierungssystem (raw_files:, provenance:-Marker, Inline-Zitate, provenance.md-Umkehrindex) ist reifer als jede Referenzimplementierung. Die deterministische CLI (wikitool) führt alle mechanischen Operationen präzise aus. Konfidenzscoring mit Verfallformal existiert und funktioniert.
- **Qualitätsschwellenlücke:** Keine Überprüfung auf Seitenlänge/Qualität - Farza definiert Stub-Minimum (≥3 Sätze / 15 Zeilen), Teilungsschwelle (>120-150 Zeilen) und Zeilenzählziele pro Typ. Pascalandy's Schema schlägt 200 Zeilen als Ziel vor.
- **Stilfibel-Lücke:** Keine expliziten Ton-/Formulierungsregeln - Farza definiert „Wikipedia, kein AI-Ton" mit spezifischen Verboten (Gedankenstrichstriche, Füllwörter wie „bahnbrechend", Phrasen wie „es ist zu beachten", maximal 2 Zitate/Seite).
- **Anti-Cramming-Lücke:** Keine Heuristik für den Zeitpunkt, wann eine neue Seite erstellt oder zu einer bestehenden hinzugefügt werden soll - Farza's Regel: „Wenn du den 3. Absatz zu einem Unterthema auf einer bestehenden Seite hinzufügst, verdient dieses Unterthema seine eigene Seite."
- **Audit-Rhythmus-Lücke:** Keine reguläre Qualitäts-Audit-Kadenz - Farza: Index+Backlinks alle 15 Einträge neu erstellen, auf 0 neue Artikel prüfen (Cramming-Alarm), 3 meistgeänderte Artikel neu lesen.
- **Index-Skalierungs-Lücke:** Keine Schwellen für die Aufteilung von index.md - Pascalandy: Tabellensektionen bei >50 Einträgen aufteilen, _meta/topic-map.md bei >200 Gesamtseiten erstellen.
- **Sicherheitslücke:** Kein Bestätigungsgate für Massenpublizierungen - Farza: anhalten und bestätigen, wenn eine Operation ≥10 Seiten ändert.
- **Sitzungsprotokoll-Lücke:** Keine explizite Vorflight-Prüfung - Farza: Schema + Index + letzte N Log-Einträge vor jeder Operation lesen, um Drift zu erkennen.
- **Zu vermeidende Anti-Patterns:** Personenzentrierte Taxonomien, aggressive Always-Rewrite-Schleifen, vorzeitige Multi-Agent-Orchestrierung und die alternative Tag-Achsen-Taxonomie aus pascalandy's Schema (area/kind/topic/status/pty), da sie mit bestehenden Typen in Konflikt gerät.
## Aufgaben
- [ ] Content Quality & Style-Sektion zu AGENTS.md mit Seitenlängenschwellen und Stilfibel-Regeln hinzufügen
- [ ] lint.py mit mechanischen Überprüfungen für Zeilenzähler-Ausreißer und Index-Sektionsgröße erweitern
- [ ] Anti-Cramming-Heuristik als dokumentierte Regel im CREATE vs UPDATE-Workflow implementieren
- [ ] Checkpoint-/Audit-Rhythmus zum Wartungsplan mit spezifischen Triggern und Aktionen hinzufügen
- [ ] Index-Skalierungsschwellen definieren (Tabelle bei >50 Einträgen aufteilen, Topic-Map bei >200 Seiten)
- [ ] Massenpublizierungs-Bestätigungsgate (≥10 Seiten) als Sicherheitsprüfung im Publish-Workflow hinzufügen
- [ ] Sitzungs-Orientierung als obligatorischer erster Schritt für alle Workflows hinzufügen (AGENTS.md + index.md + aktuelle Log-Einträge lesen)
- [ ] Entity-Seite mit pascalandy-Schema erstellen, um das ausgewertete externe Schema zu dokumentieren
## Verwandte Entities
- [[AGENTS.md]]
- [[wikitool]]
- [[farzaa gist]]
- [[awesome-llm-wiki]]
## Verwandte Concepts
- [[Session Orientation]]
- [[Semantic Lint Automation]]
## Siehe auch