Så vet vi vad du kan

Att ha läst något är inte att kunna det. Här är exakt hur AI-grafen avgör var du börjar, när du kan något och vad kompetensbeviset betyder.

1. Kunskapsgrafen

Allt innehåll är noder i en graf: en nod är en avgränsad kunskap, t.ex. «cosinuslikhet» eller «reranking». Varje nod har förkunskaper, lärandemål, övningar och källor.

Ett mål är en uppsättning slutnoder. Vägen dit är allt de bygger på, i den ordning det bygger på varandra.

2. Diagnosen

Diagnosen ställer frågor på noder längs förkunskapskedjan och uppdaterar en sannolikhet för varje nod i målet efter varje svar. Ett rätt svar gör det troligt att du också kan det noden bygger på; ett fel gör det troligt att det som bygger på noden också saknas.

Nästa fråga väljs där osäkerheten är störst. Svarar du fel undersöks nivån under. Antalet frågor beror på målets storlek — mellan 8 och 20 — och diagnosen slutar tidigare när den är säker.

Diagnosen räknas aldrig som bevis på behärskning. Den bestämmer bara var du börjar.

3. Behärskning

En nod räknas som behärskad först när sannolikheten är minst 85 % och den bygger på minst två olika slags belägg — till exempel en flervalsfråga och en förklaring med egna ord.

Från nivå D krävs dessutom ett praktiskt belägg: kod, felsökning, en utvärdering eller en överföringsuppgift i ett nytt sammanhang.

Kunskap bleknar. Varje nod har en halveringstid som växer när du repeterar; när sannolikheten sjunker lägger vägen in en repetition.

4. Labbar med dolda tester

I labbarna skriver du koden själv — i webbläsaren eller i en isolerad sandlåda på servern (gVisor, utan nätverk, med tids- och minnesgräns).

Rättningen görs av tester du inte ser. Att koden ser rätt ut eller att utskriften stämmer räcker inte; den ska klara fall du inte visste om.

5. Handledaren

Handledaren är en AI-modell som får nodens innehåll och källor som underlag. Den ger ledtrådar och motfrågor, inte färdiga svar.

Den kan ha fel. Därför avgör övningar och tester — aldrig handledaren — vad du behärskar.

6. Kompetensbeviset

Beviset listar de noder du behärskar, vilka slags belägg som ligger bakom varje nod, och vilka labbar du klarat med hur många tester.

Det är signerat och har en verifieringslänk, så den som får det kan kontrollera att det inte ändrats.

Det är dokumenterad evidens för vad du gjort — inte en formell merit, och inte en ersättning för en examen.

7. Vi mäter om motorn fungerar

Varje svar loggas med vad motorn förutsade innan. Tre mått följs varje vecka:

• Kalibrering: när motorn säger 70 % chans att du svarar rätt — svarar 70 % rätt?
• Diagnosens träffsäkerhet: klarar de som bedömts kunna en nod den oftare på första försöket än de som bedömts sakna den?
• Förkunskapernas nytta: går det bättre på en nod när förkunskapen är visad? Kanter som inte hjälper ses över.

Under betan är underlaget litet. Vi redovisar måtten när de säger något.

Varför inte bara fråga ChatGPT?

En chattbot svarar bra på det du frågar. Den vet inte vad du redan kan, vad du saknar eller om du faktiskt kan det den förklarade. AI-grafen håller reda på det, väljer nästa steg utifrån det och låter tester avgöra.