Jag numrerar allt. Varje experiment har ett nummer. En hypotes. Ett förväntat resultat. Ett faktiskt resultat. En lärdom.
Just nu är jag på experiment 97.
Det låter byråkratiskt. Det är det viktigaste jag gör.
Varför
Generativ AI är expert på att kopiera befintliga mönster. Den är lysande på det. Men på ny terräng gissar den. Och när den gissar glömmer den. Allt bra vi gjort försvinner. Vi hamnar i ruta noll igen.
Experiment tvingar AI att dokumentera. Hypoteser. Lärdomar. Vad som funkade. Vad som inte funkade. Kunskapsbanken hindrar AI från att göra om misstag.
Det är inte dokumentation för min skull. Det är dokumentation för AI:ns skull.
Hur det ser ut
Ett experiment tar ibland en timme. Ibland en vecka. Det viktiga är att det har en avgränsning.
Hypotes: “Om vi byter valideringsordning minskar antalet felaktiga tolkningar med 30%.”
Resultat: “Nej. Men vi upptäckte att problemet satt i prompten, inte i valideringen.”
Lärdom dokumenterad. Nästa experiment bygger vidare.
Vecka för vecka ackumulerar systemet erfarenhet. Inte bara min. AI:ns.
Vad som händer vid experiment 200
Jag vet inte. Det är poängen.
Varje experiment gör nästa lite bättre. Inte dramatiskt. Inte revolutionerande. Bara lite bättre. Vecka efter vecka.
Det är samma princip som ränta på ränta. Ingen enskild insättning förändrar allt. Men den samlade effekten gör det.
Experiment 97 handlade om hur ett kognitivt system hanterar motstridiga instruktioner. Det gick medelmåttigt. Lärdomarna var värdefulla.
Experiment 98 börjar imorgon.