Tolka en språkmodell
Attention-mönster, logit lens och förklaringar för slutanvändare — hur man ser vad en modell gör, och var gränsen går för vad en förklaring bevisar.
Alla kunskaper som ingår (66) — i beroendeordning
- 1AMönster och kategorier
- 2BData från vardagen
- 3AInstruktioner i rätt ordning
- 4BAlgoritmiskt tänkande
- 5CFunktioner och koordinatsystem
- 6DDerivata och optimering
- 7CProgrammeringslogik — variabler, villkor, loopar
- 8CPython — grunderna
- 9CPython — listor, loopar och dictionaries
- 10BRegler kontra inlärning
- 11BKällkritik och ansvar när AI svarar
- 12CStatistik — medelvärde, median och spridning
- 13CSannolikhet — grunderna
- 14DLoss-funktioner
- 15ATal och de fyra räknesätten
- 16BBinära tal och bitar
- 17BBråk, decimaltal och procent
- 18CHur datorn lagrar text, bilder och ljud
- 19AJämföra och sortera tal
- 20BKoordinater: hitta på kartan
- 21CProportionalitet och skala
- 22CLinjära samband i tabeller
- 23CLinjen genom punkterna
- 24DTokenisering
- 25BTräningsdata, features och etiketter
- 26BKlassificering — så sorterar en modell
- 27CDin första prediktiva modell — en rät linje
- 28DGradient descent
- 29CNeuronnät — intuitionen
- 30CPromptning — att styra en språkmodell
- 31CAnsvarsfull användning av AI
- 32DVektorer
- 33DMatriser och matrismultiplikation
- 34CBilder som matriser
- 35DLinjär regression med flera features
- 36DLogistisk regression och beslutsträd
- 37EFörklarbarhet för slutanvändare
- 38ELinjära avbildningar
- 39EEgenvärden och egenvektorer
- 40EMatrisfaktorisering och lågrangsapproximation
- 41DNeuronnät — forward pass med matriser
- 42DBackpropagation
- 43DVad ser nätet? Bilder genom lagren
- 44DEmbeddings — ord som vektorer
- 45DAttention
- 46EVisualisera attention-mönster
- 47DOverfitting och generalisering
- 48DPyTorch — tensorer och autograd
- 49ESingulärvärdesuppdelning (SVD)
- 50EPCA — principalkomponentanalys
- 51EAutoencoders
- 52DTräning, validering och test
- 53DTräna ett neuronnät i PyTorch
- 54DTransformers — arkitekturen
- 55EMulti-head attention i detalj
- 56ESpråkmodeller — träning och generering
- 57EModellutvärdering
- 58EVetenskaplig metod i AI
- 59GMechanistic interpretability — grunderna
- 60FAktiveringar och linjära sonder
- 61GLogit lens och residualströmmen
- 62GSparse autoencoders för features
- 63CVrid på rattarna: vikter
- 64CLager på lager
- 65CTräna ett neuronnät i webbläsaren
- 66DTitta in i nätet