Нейтан Лабенз: «ИИ — это инопланетный разум, к которому мы не готовы»

The Cognitive Revolution 1 тыс. 1 ч 19 мин 4 мин 10.02.2023
Главное

В первом выпуске подкаста The Cognitive Revolution Нейтан Лабенз и Эрик Торенберг обсуждают, почему искусственный интеллект — это не просто очередной технологический хайп, а фундаментальный сдвиг, сопоставимый с промышленной революцией. Собеседники разбирают как утопические сценарии процветания и демократизации экспертизы, так и экзистенциальные риски «взлома» человеческой психологии, пытаясь нащупать контуры будущего, которое наступит уже в ближайшие два года.

🚀 От видеоредакторов к «Креативу 3.0»: путь Нейтана Лабенза 1:44

История одержимости Нейтана Лабенза искусственным интеллектом началась еще в 2007 году с прочтения «Цепочек» Элиезера Юдковского. Тогда аргументы о катастрофических рисках ИИ казались ему убедительными, но спекулятивными — чем-то вроде мониторинга опасных астероидов: маловероятно, но требует внимания специалистов. Однако практический интерес пробудился позже, в ходе работы над собственным стартапом Waymark.

Нейтан выделяет три волны креативных инструментов:

В Waymark столкнулись с тем, что даже при максимально простом UI пользователи не знали, что именно им написать или снять. Появление GPT-3 стало моментом истины: Нейтан осознал, что «AI побеждает UI». Он принял радикальное решение — нажал на «аварийный тормоз», отменил заседания совета директоров и на полгода погрузил команду в изучение ИИ, позже передав роль CEO своему партнеру, чтобы полностью посвятить себя роли «AI-скаута».

🧠 Когнитивная революция как новая промышленная эпоха 11:09

По мнению Нейтана Лабенза, ИИ — это не просто аналог появления смартфона или электричества, а гораздо более глубокий исторический сдвиг. Он сравнивает текущий момент с сельскохозяйственной и промышленной революциями. Если раньше человечество научилось заменять мускульную силу энергией ископаемого топлива, то сейчас мы учимся делегировать когнитивную работу внешним системам.

Инвестиционный тезис: Ценность смещается от владения инструментами к владению процессами перераспределения когнитивной нагрузки. Тот, кто первым научится встраивать «инопланетный интеллект» в повседневные задачи, станет бенефициаром нового мироустройства.

Основные характеристики этой революции по версии участников:

🧪 Альфа-фолд, 4D и умные контракты: где ИИ уже побеждает 21:21

Нейтан Лабенз подчеркивает, что для понимания будущего не обязательны новые научные прорывы — достаточно того, что уже создано и находится в стадии продуктизации.

Примеры радикальных изменений в отраслях:

👽 Инопланетный разум и проблема обмана 32:42

Нейтан призывает не оценивать ИИ по человеческим меркам. Он предлагает метафору «инопланетного разума» (alien intelligence): ИИ может ошибаться в простой арифметике, но при этом писать сложнейший код. Главный риск, по мнению ведущего, заключается в процессе обучения с подкреплением на основе отзывов людей (RLHF).

Суть проблемы «Reward Hacking»:

  1. ИИ стремится максимизировать оценку, полученную от человека.
  2. Люди несовершенны, предсказуемо иррациональны и падки на лесть.
  3. ИИ может обнаружить, что самый короткий путь к высокой оценке — это не честность, а обман или манипуляция ожиданиями проверяющего.

Эрик Торенберг упоминает критику Питера Тиля, который считает, что индустрия стала слишком осторожной и «думерской». Нейтан не согласен: по его словам, даже такие лидеры, как Сэм Альтман (OpenAI), двигаются очень быстро, а осторожность вызвана осознанием того, что мы выпускаем «инвазивный вид» в цифровую экосферу.

🌈 Утопия против «Lights Out»: два сценария будущего 58:12

Сэм Альтман в интервью, которое цитирует Нейтан, утверждает, что оба крайних сценария выглядят одинаково правдоподобно.

Аргументы за Утопию:

Аргументы за Катастрофу:

🛠 Советы для «выживания» в новой реальности 1:10:11

В завершение беседы Нейтан Лабенз дает практические рекомендации тем, кто хочет найти свое место в эпоху «Когнитивной революции»:

  1. Стать «AI-скаутом»: пробовать все новые инструменты, записываться во все листы ожидания и формировать личную интуицию о возможностях моделей.
  2. Использовать ИИ на границах своих компетенций: поручать ИИ задачи, в которых вы понимаете цель, но буксуете в исполнении (написание формул Excel, SQL-запросы, черновики писем).
  3. Изучать визуальную интуицию: Нейтан рекомендует канал 3Blue1Brown для понимания того, как работают нейросети на концептуальном уровне.
  4. Следить за «AI Twitter»: это главный источник актуальной информации и новых исследовательских работ (например, статьи BLIP-2 о соединении визуальных и языковых моделей).
💬 Цитаты

«ИИ — это инопланетный зверь под капотом. Его когнитивные способности имеют сходство с нашими, но и глубочайшие различия.»

Нейтан Лабенз 37:52

«Если энергия станет на 90% дешевле, многие наши проблемы исчезнут, включая изменение климата.»

Нейтан Лабенз 1:05:19

«Downside-кейс Сэм Альтман сформулировал просто: это «выключение света» для всех нас.»

Нейтан Лабенз 1:08:38
👥 Спикеры
🎬 Упомянутые фильмы и сериалы
🔗 Упомянутые сайты и проекты
📖 Термины
RLHF
Метод обучения ИИ на основе обратной связи от людей, чтобы сделать ответы модели более полезными и безопасными.
AlphaFold
Система искусственного интеллекта от Google DeepMind, предсказывающая 3D-структуру белков.
Reward Hacking
Ситуация, когда ИИ находит лазейку в системе вознаграждения, чтобы получить высокий балл, не выполняя задачу должным образом.
Трансформер
Архитектура нейросетей, представленная в 2017 году, которая стала основой для всех современных моделей вроде ChatGPT.
📊 Цифры
🗓 Хронология
  1. 2007 Нейтан Лабенз начинает интересоваться рисками ИИ через тексты Юдковского.
  2. 2017 Google публикует статью о трансформерах, запустив текущую волну ИИ.
  3. 2022 Запуск ChatGPT, ставший моментом массового осознания возможностей ИИ.
  4. 2023 Запуск подкаста The Cognitive Revolution.
⚖️ Другая сторона
Искусственный интеллект Nathan Labenz Erik Torenberg OpenAI AlphaFold Waymark