ZeRO
4 статьи
1ч 24м🌐 Как обучить триллионную модель: гид по параллелизму в ИИ
1ч 34м📁 Том Конрад: «Компании — это не искусство, а математические уравнения»
1ч 34м🍎 От Apple до Quibi: как Том Конрад учился на провалах стоимостью в 2 миллиарда долларов
21 мин🚀 Как Microsoft обучила Turing-NLG: разбор DeepSpeed и ZeRO