ms-ai-architect/docs
Kjell Tore Guttormsen b0b5890703 feat(ms-ai-architect): R11 pilot kjørt — §4-invarianten falsifisert, 9 provbare swaps i hele korpuset [skip-docs]
§10-målingen er gjennomført mot live ledger (243 records). Ingen KB-fil er
redigert og ingen ledger-record er skrevet — §8s single-writer-state er urørt.

Instrumentet ER O1-driveren med writes av (scripts/kb-eval/lib/fix-op.mjs, 30
tester). Måling #1 og #3 kommer dermed ut av mekanismen som senere skal ta på
korpuset, ikke ut av en proxy-heuristikk.

HOVEDFUNN — §4 som skrevet er utilstrekkelig, målt:
Kjørt eksakt som spesifisert slapp den gjennom 6 swaps på piloten, hvorav 4 er
GALE editer (presisjon 2/6):
- 30-dagers → 24-dagers   (enhets-kryssing: kilden sier 24 HOURS)
- 3000 req/sek → 50       (metrikk-kryssing: query-throttle vs indexing-rate)
- Microsoft Agent 365 → 7 (identifikator lemlestet, «7» høstet fra «E7»)
- text-embedding-ada-002 → ada-2 (identifikator lemlestet)
§4 binder proveniensen til verdien og formen på editen — ingenting om at de to
tokenene betegner SAMME STØRRELSE. Påstanden om at invarianten er «deliberately
stronger than human review at scale» holder ikke.

TILLEGG: contextCorresponds() krever samme label eller samme enhet på begge
sider. Bevisst leksikalsk, UTEN oversettelsestabell — «dokumenter» læres ikke å
være «documents», fordi en synonymtabell innfører en ny faktakilde og er en
operatørbeslutning. Konsekvensen er målt: swap er provbar praktisk talt bare der
konteksten er språknøytral (URL, kodeeksempel, parameternøkkel).

TALLENE:
- Pilot (≥7): 24 filer / 202 flagg → O1 = 2 (1,0 %), O3 = 200 (99,0 %)
- Hele korpuset: 218 filer / 776 flagg → 15 sluppet gjennom, 9 korrekte
- Kun iso_date (api-version-bump) overlever hånd-verifisering: 9/9.
  number/version lemlester identifikatorer (AI-900 → AI-901, gpt-4o → gpt-5.1o
  ×2, Java-agent 3.7.5 → 3.4.0 = nedgradering) og skal IKKE påføres.
- Kun 7 av 200 aborter (3,5 %) er en fiksbar engineering-gap. Mer locator-
  arbeid kan ikke flytte O1-tallet vesentlig.

Måling #2 (R8 → O2) er IKKE besvart og kan ikke besvares maskinelt: R8 gir null
O1, og hvilke av de 46 enumerasjonene som subtraherer rent avhenger av dommerens
PROSA-reason. Måling #4 (review-throughput) er ikke målt — det krever
menneskelige review-økter som ikke har skjedd. Begge står som ikke-målt, ikke
som antatt.

VIDERE FUNN: subtraksjon kan etterlate en misvisende rest (§5 sier den «cannot
introduce a new error» — sant om setningen, usant om leserens slutning), og kan
ødelegge sann informasjon (prebuilt-check → finnes, heter prebuilt-check.us).
`disposition` er `outdated` på 202/202 og bærer null informasjon, i strid med
flagg-formatspesifikasjonen. `claim` matcher fillinjen ordrett i 0 av 202.

Full oppskrift og åpne operatørbeslutninger: docs/r11-pilot-results.md
2026-08-03 16:30:31 +02:00
..
c3-course-detection-plan.md docs(ms-ai-architect): C3 §8 besluttet (delegert) — spec GODKJENT, +fetch-robusthetskontrakt +removed full-enum-pin [skip-docs] 2026-06-23 12:42:22 +02:00
c3-course-detection-spike.md docs(ms-ai-architect): C3 Fase 0 — Learn Platform API auth-oppsett + spike kartlagt; STATE → spec neste [skip-docs] 2026-06-23 12:09:19 +02:00
cosmo-removal-brief-2026-06.md refactor(ms-ai-architect): retire backfill-toc.mjs (superseded), migrer cosmo-removal-brief:41-kobling, logg §8-residual [skip-docs] 2026-07-04 23:33:55 +02:00
development.md docs(ms-ai-architect): R0 tillit + dok-hygiene — anonymiser handover-kontekst, rett stale CLAUDE.md-pekere, programdok §6 à jour med §8, superseded-merke på workflow-plan, fjern For Cosmo-instruks [skip-docs] 2026-07-03 00:39:59 +02:00
devils-advocate-audit-2026-06-18.md docs(ms-ai-architect): devil's-advocate-audit (10 dim, 89 verifiserte funn) 2026-06-18 12:00:34 +02:00
eu-ai-act-integration-handover.md docs(ms-ai-architect): R0 tillit + dok-hygiene — anonymiser handover-kontekst, rett stale CLAUDE.md-pekere, programdok §6 à jour med §8, superseded-merke på workflow-plan, fjern For Cosmo-instruks [skip-docs] 2026-07-03 00:39:59 +02:00
gap-analysis-2026-02.md feat(ultraplan-local): v1.6.0 — /ultraresearch-local deep research command 2026-04-08 08:58:35 +02:00
ingestion-security-brief-2026-07.md docs(ms-ai-architect): R19 — Layer B↔llm-ingestion-pipeline-security konvergens (hub-and-spoke spoke-peker) + brief §6-koordineringspeker [skip-docs] 2026-07-05 10:25:06 +02:00
kb-mechanism-redesign-brief.md docs(ms-ai-architect): scope-brief for KB-mekanisme-redesign (neste fase) 2026-06-19 14:24:13 +02:00
kb-mechanism-redesign-plan.md fix(ms-ai-architect): Sesjon 11 — K1 trigger-presisjon, blindet judge PASS alle 5 2026-06-20 10:00:47 +02:00
kb-refresh-backlog-2026-06.md docs(ms-ai-architect): noter ref-fil innholdskvalitet-gap i backlog — Spor D scorer struktur/hygiene (K8/N3/N4/refCount), ikke substansiell korrekthet mot MS Learn; 3 retningsvalg å avklare før bygging 2026-06-26 00:12:04 +02:00
kb-refresh-cost-cluster-2026-06.md docs(ms-ai-architect): apply-brief critical cost-cluster KB-refresh (7 drift-rapporter) 2026-06-23 21:59:11 +02:00
kb-update-apply-brief.md docs(ms-ai-architect): STATE + brief — Medium-bøtte FERDIG (070141f) 2026-06-19 14:03:54 +02:00
kb-update-policy.md feat(ultraplan-local): v1.6.0 — /ultraresearch-local deep research command 2026-04-08 08:58:35 +02:00
okf-second-brain-brief-2026-06.md docs(ms-ai-architect): S-OKF D2-funn tatt opp av runden som ÅS#5 (memo v2) 2026-07-21 08:48:29 +02:00
onboarding-redesign-brief.md test(ms-ai-architect): C2.4 lås K4 privat-sektor-paritet (regresjonsvakt) + omdøp feildøpt doc [skip-docs] 2026-06-22 17:39:11 +02:00
onboarding-redesign-plan.md test(ms-ai-architect): C2.4 lås K4 privat-sektor-paritet (regresjonsvakt) + omdøp feildøpt doc [skip-docs] 2026-06-22 17:39:11 +02:00
playground-ai-act-plan.md feat(ultraplan-local): v1.6.0 — /ultraresearch-local deep research command 2026-04-08 08:58:35 +02:00
playground-plan.md feat(ultraplan-local): v1.6.0 — /ultraresearch-local deep research command 2026-04-08 08:58:35 +02:00
playground-v2-spec.md feat(ultraplan-local): v1.6.0 — /ultraresearch-local deep research command 2026-04-08 08:58:35 +02:00
playground.md chore(ms-ai-architect): release v1.16.1 — KB-refresh (tema a+b+RBAC) 2026-06-23 21:33:28 +02:00
r11-flag-format-2026-07.md docs(ms-ai-architect): R11-flaggformat-spec + valideringstest (judge-output + augmentering) [skip-docs] 2026-07-04 23:24:06 +02:00
r11-pilot-results.md feat(ms-ai-architect): R11 pilot kjørt — §4-invarianten falsifisert, 9 provbare swaps i hele korpuset [skip-docs] 2026-08-03 16:30:31 +02:00
r11-tiered-fix-design.md feat(ms-ai-architect): R11 pilot kjørt — §4-invarianten falsifisert, 9 provbare swaps i hele korpuset [skip-docs] 2026-08-03 16:30:31 +02:00
ref-kb-audit-2026-06.md docs(ms-ai-architect): ref-KB audit — verifisert ground truth + reproduserbart audit-skript 2026-06-26 00:25:39 +02:00
ref-kb-correctness-program-2026-06.md docs(ms-ai-architect): G6-LA-lukking i §8-registeret — G6 🟡🟢 (Layer A aktivert + live-verifisert, Enhet B) + lukke-logg [skip-docs] 2026-07-18 11:02:14 +02:00
ref-kb-direction-note-2026-06.md docs(ms-ai-architect): reconcile ref-KB named/folder-premiss — 169/220/0 autoritativt 2026-06-26 10:15:46 +02:00
ref-kb-gold-reconciliation-2026-06.md feat(ms-ai-architect): G5b gull-friskhets-spot-sjekk LUKKET — 4 v3-FP re-adjudert mot live, ALLE stale gull (v3 flagget korrekt), baseline løftet v3 P89.7/R92.1 → P100/R92.9/0FP; v3.1 forfattet (ren recall-hardning, FP-vakt droppet) [skip-docs] 2026-06-30 13:43:52 +02:00
ref-kb-workflow-plan-2026-06.md docs(ms-ai-architect): S-OKF bindes til delt bibliotek — tooling fra llm-ingestion-okf fase 4, ikke lokal bygging (tre-delt eierskap: catalog=konvensjon, biblioteket=implementasjon, guard=sikkerhet); gate = avklaring B2 [skip-docs] 2026-07-20 07:12:00 +02:00
skill-eval-routine-improvement-2026-06.md docs(ms-ai-architect): skill-eval-rutine v2 brief — Pocock-lens + best-practice-triangulering (offisiell Anthropic + community-lintere); nytt spor, research-grunnet [skip-docs] 2026-06-30 12:52:03 +02:00
skill-lifecycle-spor-b-plan.md docs(ms-ai-architect): Spor B plan godkjent — skill-livssyklus (krav 5+6, omdefinert) 2026-06-20 11:09:11 +02:00
skill-quality-scoring-plan.md feat(ms-ai-architect): Spor D — skill-quality score-motor (ren lib + rubrikk grunnet i Anthropic) (TDD) 2026-06-23 16:57:31 +02:00
skill-validation-routine-brief-2026-07.md docs(ms-ai-architect): skill-validerings-rutine-brief (AI-Engineer-lens, Trinn 0-4) — input til R15 /trekplan [skip-docs] 2026-07-03 00:39:59 +02:00
spor1-authority-selection.md docs(ms-ai-architect): Spor 1 — authority-URL valgt per reference-fil (manifest source-satt) [skip-docs] 2026-07-04 09:04:24 +02:00
spor1-classification-review.md docs(ms-ai-architect): Spor 1 — edge-set-klassifisering adjudert (manifest finalisert) [skip-docs] 2026-07-03 01:05:28 +02:00
spor1-migration-outcome.md feat(ms-ai-architect): Spor 1 — worklist aktivert + CT5/N4 flyttet; utfall + policy-delta + base-felt-restanse logget [skip-docs] 2026-07-04 10:20:48 +02:00
v3.1-fanout-runbook.md feat(ms-ai-architect): RX-OPS1 — deterministisk Layer B commit-gate (pre-commit-scan) + runbook Forutsetning 0 [skip-docs] 2026-07-16 20:52:45 +02:00
windows-clone-to-pr-ros-guide.md test(ms-ai-architect): C2.4 lås K4 privat-sektor-paritet (regresjonsvakt) + omdøp feildøpt doc [skip-docs] 2026-06-22 17:39:11 +02:00