Herrejävlar anamma... Kramar ansiktet kokt igen! 🔥 de har precis släppt en gratis blogg (BOK) som täcker den no-bs verkligheten att bygga SOTA-modeller. Jag har inte sett något laboratorium / forskare gå in på de verkliga besluten bakom LLM-forskningen och dess nyanser. Detta är bokstavligen en pärla. Studieplan: → Träningskompass: varför → vad → hur → Varje stor modell börjar med en liten ablation → Utformning av modellarkitekturen → Konsten att kurera data → Träningsmaraton → Bortom basmodeller – efter utbildning 2025 → Infrastruktur - den obesjungna hjälten När jag skummar igenom bloggen är detta otroligt detaljerat precis som deras Ultrascale playbook. Jag kommer att läsa detta och dela mer om det under de kommande dagarna. Läs här: