Právě jsme publikovali Smol Training Playbook: destilát těžce nabytých znalostí, abychom se podělili o to, co je potřeba k trénování SOTA LLM ⚡️ Představujeme našeho hlavního hrdinu SmolLM3, pokrýváme: 🧭 Strategie, zda trénovat svůj vlastní LLM a spálit všechny své VC peníze 🪨 Předtrénování, neboli přeměna hory textu na efektní automatický dokončovač 🗿Jak vyřezávat základní modely pomocí alchymie po tréninku 🛠️ Základní infrastruktura a jak ladit cestu ven z očistce NCCL To nejlepší z kapitoly po tréninku ve vlákně 👇