ms-ai-architect/scripts/kb-eval
Kjell Tore Guttormsen 147ca0b993 feat(ms-ai-architect): anvend form #36 paa alle 5 medlemmene; fell 663(c) som #37-medlem 6 [skip-docs]
Form #36 (droppet kvalifikator under et verifikasjonsstempel) anvendt paa sine
fem maalte medlemmer. Reparasjonen er en INNSNEVRING i hvert tilfelle, aldri
rutet gjennom #34/#35. Fersk microsoft-learn MCP-henting per medlem, gjort av
HOVEDKONTEKSTEN (ingen subagenter). Hel-linje-unikhet talt korpus-bredt (394
filer) foer hver erstatning; alle fem = 1 forekomst.

Korpus-bred kildemaaling (#35's regel), nevner rapportert: 10 linjer i 9 filer
siterer azure-openai-gateway-multi-backend. Av de 8 oevrige baerer INGEN en
paastand om credential termination eller topologi-omfang - defekten er begrenset
til medlem 2 og 3.

1. model-versioning-registry-management.md:323 - "For production online endpoint
   deployments" -> "For production workloads paa managed online endpoints".
   idx-33t lukket (status=resolved + resolution).
2. ai-services-enterprise-architecture.md:573 - BEGGE former i EN edit, ett
   stempelflytt: #36-leddet innsnevret til topologi (1); #37-leddet (tagg-
   paastanden) fjernet.
3. multi-model-strategy-costs.md:663 - #36 paa (a)+(b), "Dokument bekrefter" ->
   "Dokumentet bekrefter, for topologien ...". Ledd (c) ADJUDISERT OG FELT i
   samme henting: sida har 0 treff paa "Foundry Tools", 0 paa "Azure OpenAI in
   Foundry Models" og 0 paa "Azure OpenAI" i det hele tatt, mot kjent-positiv-
   kontroll "credential termination"=1 / "Foundry"=11. Foert inn i #37's
   GOVERNS som sjette medlem, ren append, datert.
4. genaiops-llm-specific-practices.md:212 - "(frittstaaende, anbefalt)" ->
   "(frittstaaende)" + kildens egen kategori-preferanse mot egenutviklet kode.
   Blokkstempelets naboer (211, 213) verifisert mot samme henting foer flytt.
5. multimodal-prompt-design.md:193 - "AI-genererte bildebeskrivelser" ->
   samme med kildens vilkaar (modelName/modelDeployment, 2026-05-01-preview).
   Blokkstempelet leste allerede 2026-08-25 = hentedato, saa det ble IKKE
   flyttet - ingen ny paastand avgitt om linje 196 (idx-33v's aapne medlem).

NYTT, UMAALT LEDD FUNNET UNDER ANVENDELSE: chargeback/usage-tracking-leddet paa
573 og 663(b) baerer samme #36-defekt - "Using a gateway in this topology
enables client-based usage tracking" staar under topologi 1, og sida sier det
motsatte for topologi 2. Stempelet som flyttes dekker det leddet, saa det ble
innsnevret i samme edit. Dette falsifiserer #37's egen medlem-2-frikjennelse
("credential termination and the chargeback point ARE faithful"); korreksjonen
er foert i #37's GOVERNS-tillegg, siden ordren forbyr aa redigere formteksten.

Gater: check-g7-queue.mjs 0 drift exit 0 - suite 1052/1052.
Assertert i skriptet: alle 79 oevrige entries bit-identiske, idx-33t endret kun
status+resolution, _meta urort utenfor ratified_forms["#37"], #37 ren append.
2026-08-25 23:40:20 +02:00
..
data feat(ms-ai-architect): anvend form #36 paa alle 5 medlemmene; fell 663(c) som #37-medlem 6 [skip-docs] 2026-08-25 23:40:20 +02:00
lib feat(ms-ai-architect): G7-ankere kan baere sin egen fil — klasse-entryen for de 42 er skrevet, og #17 og #14 er begge oppfylt 2026-08-11 22:23:13 +02:00
apply-o2-ratified.mjs fix(ms-ai-architect): R11 — første korpus-edit; 4 ratifiserte O2-subtraksjoner anvendt (idx 17, 19, 33, 14-redusert) 2026-08-03 20:40:08 +02:00
apply-skill-op.mjs feat(ms-ai-architect): Spor D steg 1 — apply regenererer hel-korpus score-cache post-mutasjon (TDD) [skip-docs] 2026-06-23 19:51:04 +02:00
build-gold-set.mjs feat(ms-ai-architect): G3 gull-intern-konsistens-lint + G4 build-instruks-policy — §8 gap-lukk [skip-docs] 2026-06-30 09:55:15 +02:00
build-judge-payloads.mjs feat(ms-ai-architect): R7.1 — build-judge-payloads får --claims <path> (per-batch korpus-manifest, TDD; default = bakeoff-manifestet uendret) [skip-docs] 2026-07-18 11:16:22 +02:00
build-sample-frame.mjs feat(ms-ai-architect): Fase 0 steg 1 — deterministisk sample-frame (45 volatil + 10 kontroll) + TDD [skip-docs] 2026-06-26 14:18:53 +02:00
check-g7-queue.mjs feat(ms-ai-architect): G7 lukket som mekanisme — navngitt review-kø (form b), valgt på måling 2026-08-03 21:10:00 +02:00
check-o2-returns.mjs feat(ms-ai-architect): reproduserbar V1/V2/V2b-sjekk av O2-returene (25 tester) [skip-docs] 2026-08-03 17:40:02 +02:00
classify-fix-ops.mjs feat(ms-ai-architect): R11 §4b implementert — status-synonymtabellen målt, 8 forslag hånd-dømt [skip-docs] 2026-08-03 17:13:05 +02:00
compute-base-rate.mjs feat(ms-ai-architect): Fase 0 steg 3 — base-rate-rapport + GATE: BYGG Fase 3 (scoped/hybrid) [skip-docs] 2026-06-26 17:15:54 +02:00
detect-skill-lifecycle.mjs feat(ms-ai-architect): Sesjon 15 — B2 K10 søsken-scope-ikke-overlapp 2026-06-20 11:59:59 +02:00
eval.mjs feat(ms-ai-architect): Spor 3 Port 3 (CT5) — deterministisk sourcedness erstatter LLM-samplet K8 [skip-docs] 2026-06-29 15:10:14 +02:00
extract-judge-claims.mjs feat(ms-ai-architect): S1 judge bake-off harness + forhåndsregistrert gate (TDD) [skip-docs] 2026-06-26 20:10:58 +02:00
judge-claim-prompt-v2.md feat(ms-ai-architect): S1 v2 targeted iteration — GATE PASS (recall 84.2%, precision 84.2%) [skip-docs] 2026-06-26 21:23:50 +02:00
judge-claim-prompt-v3.1.md feat(ms-ai-architect): G5b gull-friskhets-spot-sjekk LUKKET — 4 v3-FP re-adjudert mot live, ALLE stale gull (v3 flagget korrekt), baseline løftet v3 P89.7/R92.1 → P100/R92.9/0FP; v3.1 forfattet (ren recall-hardning, FP-vakt droppet) [skip-docs] 2026-06-30 13:43:52 +02:00
judge-claim-prompt-v3.md feat(ms-ai-architect): judge-claim-prompt-v3 (R1-R7 mot 8 feilmoduser) — G4 lukket, G1 v3 forfattet [skip-docs] 2026-06-30 10:14:31 +02:00
judge-claim-prompt.md feat(ms-ai-architect): S1 judge bake-off harness + forhåndsregistrert gate (TDD) [skip-docs] 2026-06-26 20:10:58 +02:00
judge-pass-manifest.mjs feat(ms-ai-architect): per-fil judge-pass-manifest (appendJudgedFile + pendingFiles resume-skip, data/ git-tracked, TDD) [skip-docs] 2026-07-04 23:17:01 +02:00
judge-prompt.md feat(ms-ai-architect): Spor 3 Port 3 (CT5) — deterministisk sourcedness erstatter LLM-samplet K8 [skip-docs] 2026-06-29 15:10:14 +02:00
lint-gold-consistency.mjs feat(ms-ai-architect): G3 gull-intern-konsistens-lint + G4 build-instruks-policy — §8 gap-lukk [skip-docs] 2026-06-30 09:55:15 +02:00
plan-skill-op.mjs feat(ms-ai-architect): Sesjon 20 — B3 create_skill (dvelende, konstruktiv op) [skip-docs] 2026-06-20 21:37:19 +02:00
ref-file-audit.py docs(ms-ai-architect): ref-KB audit — verifisert ground truth + reproduserbart audit-skript 2026-06-26 00:25:39 +02:00
run-judge-bakeoff.mjs feat(ms-ai-architect): S1 v2 targeted iteration — GATE PASS (recall 84.2%, precision 84.2%) [skip-docs] 2026-06-26 21:23:50 +02:00
score-skill.mjs feat(ms-ai-architect): Spor D Steg B — skill-quality lifecycle-gate + score-cache (TDD) 2026-06-23 18:26:29 +02:00