От DeepMind до Microsoft: Мустафа Сулейман о будущем ИИ, опасности автономии и качестве данных

Greylock 1,4 тыс. 35 мин 5 мин 21.06.2024
Главное

Мустафа Сулейман, один из пионеров современной индустрии искусственного интеллекта, сооснователь DeepMind и Inflection AI, а ныне руководитель ИИ-направления в Microsoft, обсуждает с партнером Greylock Сетом Розенбергом эволюцию технологий от «абсурдных» идей 2010 года до современных систем. В центре внимания — переход от гонки параметров к борьбе за качество данных, определение «практического» интеллекта и будущее, где ИИ превращается из чат-бота в автономного ассистента с памятью и характером.

🧠 От «абсурдной» идеи к фундаменту индустрии 1:20

В 2010 году, когда Мустафа Сулейман вместе с коллегами основал DeepMind, идея создания искусственного общего интеллекта (AGI) казалась большинству современников не просто невыполнимой, а абсурдной . В то время академические лаборатории не были готовы к масштабным инженерным проектам, а правительства не видели в этом приоритета .

По словам Мустафы Сулеймана, его мотивация всегда была прагматичной:

📏 Как измерить интеллект: от теста Тьюринга к прибыли в $1 млн 4:51

Определение интеллекта долгое время оставалось философским вопросом, но для DeepMind оно стало инженерной задачей. Третий сооснователь компании, Шейн Легг, определил интеллект как способность системы «демонстрировать хорошие результаты в широком спектре сред» .

Мустафа Сулейман предлагает критически пересмотреть классические метрики:

  1. Проблема теста Тьюринга: Современные системы уже способны вводить людей в заблуждение в ходе разговора, но это не делает их по-настоящему интеллектуальными в практическом смысле .
  2. «Современный тест Тьюринга»: Мустафа Сулейман утверждает, что настоящим мерилом станет способность ИИ выполнять сложные, абстрактные задачи в реальном мире .
  3. Критерий миллиона долларов: По прогнозу гостя, до конца текущего десятилетия появится система, способная самостоятельно придумать продукт, организовать его производство, наладить логистику, маркетинг и заработать на этом $1 млн прибыли .

Мустафа Сулейман считает, что на пути к AGI мы сначала увидим мощные специализированные системы с глубокой экспертизой (в медицине, праве, маркетинге), и только затем — универсальный интеллект, способный легко переключаться между этими ролями .

📉 Революция эффективности: Phi-3 и конец гонки параметров 8:46

Долгое время считалось, что возможности модели напрямую зависят от её размера. Однако Мустафа Сулейман указывает на переломный момент: Microsoft выпустила модель Phi-3, которая при размере всего 3,8 млрд параметров приближается по качеству к GPT-4 .

Ключевые технологические тренды по мнению гостя:

💎 Данные — это новая нефть (и новый барьер) 11:16

Если раньше основным методом было обучение с подкреплением на основе отзывов людей (RLHF), то сейчас индустрия переходит к обучению на основе отзывов ИИ (RLAIF).

Мустафа Сулейман делится опытом создания модели Pi (Inflection AI) и дает советы стартапам:

По мнению Сулеймана, инвестировать в вычисления (compute) важно, но настоящая ценность для предпринимателя сегодня — в создании циклов сбора и фильтрации высококачественных данных .

🛡️ Опасность полной автономии и «узкие вены» действий 20:55

Мустафа Сулейман вводит три понятия для оценки ИИ: IQ (интеллект), EQ (эмоциональный интеллект) и AQ (Action Quotient — коэффициент действия) . Хотя индустрия стремится к созданию агентов, способных действовать, Сулейман предостерегает от излишнего оптимизма.

Его позиция по автономности:

  1. Риски бесконтрольности: Полная автономия (способность ИИ самостоятельно ставить цели, добывать ресурсы и планировать) опасна и должна регулироваться .
  2. «Узкие вены» автономии: Правильный подход — давать агенту ограниченные степени свободы в конкретных средах (например, вызов конкретного API для проверки реестра) .
  3. Проблема точности: Для простых текстов достаточно 80% точности, но для действий (бронирование ресторана, финансовые транзакции) требуется 99%+. Одна ошибка в цепочке из пяти действий делает всю систему бесполезной для потребителя .

Мустафа Сулейман полагает, что системы, способные на по-настоящему надежные последовательные действия, появятся через два года, когда вычислительные мощности для обучения вырастут еще на два порядка (уровень GPT-6) .

🚀 Будущее Microsoft: AI как «холст» жизни 31:49

В Microsoft Мустафа Сулейман курирует Bing, Edge и Co-pilot. Он считает, что мы движемся к моменту, когда искусственный интеллект станет «вторым пилотом», знающим о пользователе всё .

Перспективы интерфейсов:

Мустафа Сулейман советует начинающим предпринимателям искать ниши, где «неточность является добродетелью» (например, креатив или генерация идей), и избегать областей с критически высокой ценой ошибки, пока технологии не достигнут нужного уровня прецизионности .

💬 Цитаты

«В 2010 году люди не просто думали, что создание AGI невозможно — они считали это абсолютно абсурдным.»

Мустафа Сулейман 01:46

«Интеллект — это способность показывать хорошие результаты в широком спектре различных условий.»

Мустафа Сулейман 05:43

«Параметры больше не являются основным показателем способностей; высококачественные данные — вот настоящий ценный актив.»

Мустафа Сулейман 13:06
👥 Спикеры
🔗 Упомянутые сайты и проекты
📖 Термины
AGI
Искусственный общий интеллект, способный выполнять любую интеллектуальную задачу на уровне человека или выше.
RLHF
Обучение с подкреплением на основе отзывов людей, метод настройки ИИ для соответствия человеческим предпочтениям.
RLAIF
Обучение с подкреплением на основе отзывов самого ИИ, позволяющее масштабировать процесс тонкой настройки моделей.
AQ (Action Quotient)
Коэффициент действия — способность модели не просто рассуждать, но и совершать полезные операции в реальном мире.
📊 Цифры
🗓 Хронология
  1. 2010 Основание компании DeepMind.
  2. 2017 Появление архитектуры Transformer, ставшей основой текущей революции ИИ.
  3. 2024 Выпуск модели Phi-3 и переход Мустафы Сулеймана в Microsoft.
⚖️ Другая сторона
Искусственный интеллект Мустафа Сулейман Microsoft AI DeepMind Phi-3 Inflection AI