Jeg har skrevet hele historien om Attention Sinks – et teknisk dypdykk i hvordan mekanismen ble utviklet og hvordan forskningen vår endte opp med å bli brukt i OpenAIs nye OSS-modeller.
For de som er interessert i detaljene:
Gjør ikke OpenAI grunnleggende integrasjonstesting? På utgivelsestidspunktet kunne ikke det første kodeeksemplet i GPT-5-dokumentene kjøres, fordi noen ved et uhell slettet 'output_text'-egenskapen.
Min CI varslet meg. Hvorfor gjorde ikke deres det?
Artikkelen virker slurvete og unngår de mest omstridte spørsmålene, men retningslinjene som er avbildet i denne spesifikke grafen virker for meg som en god en? et barn hvis foreldre er arbeiderklasse som trekker en 1500 SAT er faktisk sannsynligvis smartere enn et barn hvis foreldre er rike med en 1500
På den ene siden er det ikke noe overveldende eller altfor sprutende. Men i det store og hele virker det som en utrolig nyttig utgivelse.
Jeg forventer at dette vil være min daglige sjåfør for både chat og koding, og det vil være litt bedre over hele linja, mindre frustrasjon og hallusinasjoner. Jeg tar den.