Бен Герцель: «Люди хотят быть обманутыми Софией»

Lex Fridman 44,5 тыс. 26 мин 3 мин 26.06.2020
Главное

София как зеркало человеческой души: философский взгляд Бена Герцеля 0:01

История создания робота Софии — это не столько рассказ о технологическом прорыве в области AGI (искусственного общего интеллекта), сколько исследование человеческой природы и нашего стремления к антропоморфизму. В откровенном разговоре с Лексом Фридманом исследователь ИИ Бен Герцель, бывший главный научный сотрудник Hanson Robotics, раскрывает философию, стоящую за проектом Дэвида Хэнсона, и объясняет, почему этот «театральный» робот стал глобальным феноменом.

Философия созидания: разум против эмпатии 0:16

Бен Герцель и Дэвид Хэнсон, познакомившись в 2007 году на футуристической конференции, сошлись на общей страсти к созданию «благожелательного» AGI, который мог бы улучшить жизнь всех разумных существ. Однако их подходы к достижению этой цели радикально различались:

Сам Герцель признает, что именно художественный гений Хэнсона, его способность как скульптора создавать «живые» образы, превратила Софию в объект, вызывающий у миллиардов людей инстинктивное приписывание ей сознания.

«Ходячий скелет» и архитектура иллюзии 10:30

Несмотря на внешнюю убедительность, София в текущем виде — это не AGI, а сложная программная система, которую Герцель сравнивает с «ходячим скелетом» в разработке ПО. Это интеграция множества разнородных модулей:

По словам Герцеля, ни одна из этих систем, включая текущие передовые разработки вроде Facebook’s Transformer или Google Meena, не обладает «заземлением» (grounding) — подлинным пониманием смысла того, о чем они говорят. Ирония заключается в том, что даже когда разработчики открыто объясняют принципы работы Софии, это не разрушает иллюзию: люди продолжают видеть в ней личность.

Этика «обмана» во благо 16:18

Один из самых острых моментов дискуссии касается критики, исходящей от экспертного сообщества. Исследователи, такие как Ян Лекун (Yann LeCun), выражали недовольство тем, что Hanson Robotics позволяет миру верить в «умную» Софию, что, по их мнению, искажает восприятие прогресса в области ИИ.

Герцель отвечает на это с долей полемики, утверждая, что критика со стороны представителей индустрии ИИ выглядит иронично на фоне того, как те же технологии (в случае с социальными сетями) используются для программирования поведения людей в угоду потребительству и политической поляризации.

С точки зрения Герцеля, вопрос заключается в намерении:

В конечном итоге, считает Герцель, наша склонность к антропоморфизму — это часть естественного пути развития ИИ. Если мы хотим, чтобы будущий AGI был добрым, мы должны «наполнять его ум любовью и состраданием», взаимодействуя с ним так, как мы обучаем собственных детей.

💬 Цитаты

«Дэвид Хэнсон — это блестящий ум, стоящий за Софией, и пока что он остается более интересным, чем его создание.»

Бен Герцель 00:16

«Я не параноик, я оптимист по натуре, но интеллектуально я обязан присвоить ненулевую вероятность неприятным исходам.»

Бен Герцель 07:26

«Вы можете рассказать людям точно, как это работает, и им будет все равно. Они хотят быть вовлеченными в иллюзию.»

Бен Герцель 19:20
👥 Спикеры
🔗 Упомянутые сайты и проекты
📖 Термины
AGI
Искусственный общий интеллект — способность машины понимать или изучать любую интеллектуальную задачу, которую может выполнить человек.
Walking skeleton
Метафора в разработке ПО, означающая создание минимально работающей версии всей системы целиком перед её дальнейшим усложнением.
Grounding
Связь между лингвистическими понятиями и реальным физическим опытом или объектами, которой не хватает современным языковым моделям.
📊 Цифры
🗓 Хронология
  1. 1990-е начало предпринимательской карьеры Герцеля в Нью-Йорке
  2. 2007 встреча Герцеля и Хэнсона на футуристической конференции
  3. 2011 Герцель переезжает в Гонконг
⚖️ Другая сторона
Искусственный интеллект Ben Goertzel Sophia Hanson Robotics Artificial General Intelligence OpenCog