Nous venons de publier le Smol Training Playbook : une distillation de connaissances durement acquises pour partager exactement ce qu'il faut pour entraîner des LLM SOTA ⚡️ Avec notre protagoniste SmolLM3, nous couvrons : 🧭 La stratégie sur la question de savoir s'il faut entraîner votre propre LLM et brûler tout votre argent de VC 🪨 Le pré-entraînement, c'est-à-dire transformer une montagne de texte en un auto-compléteur sophistiqué 🗿 Comment sculpter des modèles de base avec l'alchimie post-entraînement 🛠️ L'infrastructure sous-jacente et comment déboguer votre chemin hors du purgatoire NCCL Points forts du chapitre sur le post-entraînement dans le fil 👇

3 jours. Dans le monde entier. Inspirer et commencer de nouvelles collaborations de recherche. Présentation de la conférence Connect. 🖇️ Rejoignez-nous pour des intervenants incroyables, y compris @1vnzh @jpineau1 @mziizm et @ShayneRedford + >20 chercheurs discutant de la manière dont la collaboration et la science ouverte font progresser les choses. 🚀