К
💬 Заметные цитаты
Важность оценки (evals) систем
«Даже 12 примеров, где вы понимаете, что такое хороший результат, лучше, чем надежда на «вибы» от одного запроса.»
Приоритет системы над моделью
«Маленькая модель, встроенная в умную систему, всегда будет лучше, чем большая модель в примитивной системе.»
Комплексный подход в разработке
«Мы ведем себя как дизайнеры Формулы-1, которые одержимы только двигателем, забывая об остальном болиде.»
«Люди склонны думать, что оценка систем (evals) — это дорого и долго. Но 12 качественных кейсов — это уже шаг вперед по сравнению с просто «вайбом» от одного примера.»
«Люди склонны недооценивать возможности базовых моделей — моделей, которые еще не прошли пост-обучение.»
👥 Часто вместе с
📺 Где появляется
🧠 Ключевые концепции
📈 Темы
OpenAI2Christopher Potts1пост-тренинг1Generative AI1GPT-41Compound AI Systems1Stanford Online1Post-training1Large Language Models1Model Evaluation1Stanford University1DSPy1
