Любовь по подписке: как роботы манипулируют нашей эмпатией

Lex Fridman 298 тыс. 3 ч 3 мин 26 мин 15.10.2022
Главное

«Быть нейроотличным — не значит иметь лицензию на то, чтобы быть козлом», — отрезает исследовательница Кейт Дарлинг, размышляя о границах этики в эпоху технологий. Мы охотно платим за облачную подписку на «память» сломанных робособак и сочувствуем пылесосу, имитирующему боль, превращаясь в идеальную мишень для коммерческих манипуляций корпораций. Однако грядущая эра эмоциональных машин способна не обесценить человеческие отношения, а кардинально расширить наши собственные границы эмпатии.

🤖 Новая порода: почему роботам не нужно быть похожими на людей 0:00

Мышление категориями фауны, а не антропоморфизма 0:13

Традиционный подход к развитию искусственного интеллекта и робототехники часто заходит в тупик из-за устоявшейся привычки сравнивать технологии с человеком. Эксперт по социальной робототехнике Кейт Дарлинг (Kate Darling) утверждает, что такое сопоставление в корне неверно и контрпродуктивно. Вместо попыток воссоздать человеческое подобие, науке и индустрии стоит обратиться к истории одомашнивания животных. Человечество веками приручало и использовало различных представителей фауны не потому, что они полностью дублировали наши действия, а именно из-за их уникальных, отличных от наших способностей. Животные стали для людей компаньонами и помощниками в работе, и этот исторический опыт автономии существ, способных воспринимать мир, мыслить и учиться, идеально проецируется на то, как нам следует воспринимать роботов сегодня.

Кейт Дарлинг, научный сотрудник MIT Media Lab и автор книги «The New Breed», подчеркивает, что общепринятого технического определения робота не существует. В массовом сознании это понятие до сих пор окутано «магией», которая исчезает, как только технология становится повседневной. Инженеры определяют робота как физический объект, способный автономно считывать параметры среды, принимать решения и воздействовать на окружение. Под это описание формально подходит даже обычный смартфон, хотя большинство робототехников его так не назовет.

Главная проблема кроется в визуальных ожиданиях: поисковые запросы по слову «робот» выдают исключительно гуманоидные образы с головой, торсом и четырьмя конечностями. Кейт Дарлинг призывает уходить от этой ложной концепции. Копирование человеческого мышления не имеет смысла с практической точки зрения: ИИ устроен иначе, и воспроизводить интеллект, который у нас уже есть — это просто скучно. Намного перспективнее создавать принципиально новые наборы навыков, которые дополнят человеческие возможности.

Безусловно, в пользу гуманоидной формы существуют два весомых аргумента:

Однако исследования в области взаимодействия человека и робота (HRI) доказывают, что для установления прочной эмоциональной связи полноценное сходство вовсе не обязательно. Достаточно минимальных поведенческих сигналов. Ярким примером служит легендарный персонаж R2D2: будучи по сути «мусорным баком на колесах», который лишь издает писки и звуковые сигналы, он вызывает у людей гораздо больше симпатии и любви, чем антропоморфный робот C-3PO.

Дизайн роботов: сила простоты и эмоциональный отклик 8:16

В дизайне социальных роботов избыточное инженерное усложнение часто вредит продукту. Ведущий интервью Лекс Фридман (Lex Fridman) отмечает, что для антропоморфизации объекта порой достаточно простейших триггеров: светящейся сферы, базового голоса или едва заметного интерактивного отклика. Минимализм и простота способны творить чудеса там, где многомиллионная сложная инженерия терпит крах. Кейт Дарлинг полностью разделяет это мнение, приводя в пример робота Cosmo, над эмоциональным обликом которого трудились не классические технари, а профессиональные аниматоры из студий уровня Disney и Pixar. Именно они понимают законы формирования привязанности, тогда как классические робототехники в вопросах социальной психологии зачастую оказываются абсолютно беспомощными.

Современные технологические компании совершают критическую ошибку, фокусируясь исключительно на точности позиционирования механизмов и качестве сборки. Они тратят годы на техническую функциональность, полностью забывая о том, как устройство будет делить общее пространство с живыми людьми. Чтобы успешно решить сложнейшие задачи навигации и контроля в реальном мире, робота нужно обучать не только сухим алгоритмам. Ему необходимо привить элементы социального интеллекта — например, способность сказать «о боже, извините, я облажался» или вовремя попросить человека о помощи. Истинная магия взаимодействия кроется в демонстрации уязвимости и самоиронии, поскольку даже сами люди не идеальны в своем восприятии пространства.

Эта विशेषता восприятия подтверждается классическими теориями исследователей интерфейсов, таких как Клиффорд Насс. На примере знаменитого виртуального помощника Clippy от Microsoft он доказал, что как только объект демонстрирует признаки социального агента (даже если это обычная канцелярская скрепка с глазами), люди начинают подсознательно предъявлять к нему полноценные социальные ожидания. И если этот агент ведет себя навязчиво, реакция отторжения оказывается куда более бурной, чем в отношении обычного неодушевленного предмета.

В ходе беседы Лекс Фридман и Кейт Дарлинг также затронули робота Marty из торговых сетей, чья интеграция в супермаркеты вызвала неоднозначную реакцию покупателей, что подробно анализируется в следующей главе статьи. Кроме того, они вскользь упомянули эстетику виртуальных аватаров Марка Цукерберга и то, как крупный корпоративный бизнес душит творческую смелость независимых художников, к чему дискуссия вернется в дальнейших частях материала.

Завершая обсуждение дизайна, Кейт Дарлинг подчеркивает, что глубокий креативный подход позволяет находить интерфейсные решения, которые будут вызывать эмпатию без слепого копирования человеческих черт. Это полностью снимает этические риски вроде трансляции нереалистичных стандартов красоты или объективации женщин, неизбежно возникающих при создании антропоморфных роботов (таких как робот Sophia). Настоящее искусство социальной робототехники будущего — это умение создавать оригинальные, нечеловеческие формы, способные вызывать у людей искренний эмоциональный отклик и доверие.

🤖 Корпоративный стерильный мир: почему пиарщики и юристы убивают душу роботов 25:22

Синдром Скрепки: почему общественные роботы-помощники становятся объектами ненависти 25:22

Интеграция новых технологий в повседневное пространство общего пользования часто наталкивается на неожиданное психологическое сопротивление. Кейт Дарлинг (Kate Darling) обращает внимание на то, что общественная реакция на появление роботов редко бывает нейтральной: обыватели либо искренне влюбляются в технологичные устройства, либо начинают испытывать к ним глубокую неприязнь. Ярким примером подобной поляризации выступает робот-помощник Marty, запущенный в продуктовых супермаркетах. Вместо того чтобы вызывать у покупателей благодарность, этот коммерческий девайс стал объектом массового раздражения, во многом повторив судьбу знаменитого интерактивного ассистента Clippy (Скрепка) от Microsoft.

Скрепка задумывалась разработчиками как полезный и дружелюбный инструмент, однако её навязчивое поведение и искусственный характер быстро превратили её в мем и символ всеобщего недовольства. Анализируя этот феномен, Кейт Дарлинг подчеркивает, что крупные корпорации раз за разом наступают на те же грабли при проектировании социальных агентов. Когда робот лишен гибкости, естественного юмора или уникальных черт характера, он мгновенно начинает восприниматься людьми как чужеродный раздражитель, бесцеремонно нарушающий личные границы в публичном пространстве.

Стерильные миры: как корпоративный риск-менеджмент убивает креативность 25:36

Главная причина, по которой даже самые богатые технологические гиганты с колоссальными бюджетами не способны создать по-настоящему обаятельного социального робота, кроется в самой структуре их управления. В современных корпорациях правит тотальный страх перед любыми потенциальными рисками (risk aversion). Процесс разработки неизбежно превращается в бюрократический кошмар, как только к делу подключаются юристы и специалисты по связям с общественностью, чья прямая обязанность — минимизировать любые намеки на репутационные или правовые угрозы.

Кейт Дарлинг выделяет несколько ключевых факторов, почему корпоративный подход методично разрушает технологические инновации:

В результате жесткой корпоративной фильтрации на свет появляются выхолощенные, безликие и абсолютно неинтересные машины. Этот тренд несет в себе колоссальные этические и эстетические угрозы для цифровых экосистем будущего. Если крупный бизнес продолжит душить креативность в угоду корпоративной безопасности и предсказуемого пиара, индустрия рискует построить метавселенную, состоящую исключительно из скучных, рафинированных виртуальных миров, не способных вызвать у живого человека искреннего эмоционального отклика.

Просвещённый диктатор против PR-отделов: будущее метавселенной и робототехники 26:03

Лекс Фридман (Lex Fridman) и Кейт Дарлинг солидарны в жесткой оценке современных корпоративных стандартов: «Пиарщики портят абсолютно всё», лишая технологии души ради сиюминутного спокойствия инвесторов. Чтобы преодолеть этот кризис и создавать продукты, способные дарить людям неподдельную радость, индустрии необходимы принципиально иные лидеры. В качестве успешной альтернативы собеседники приводят управленческие модели Стива Джобса и легендарного дизайнера Apple Джони Айва. По мнению Лекса Фридмана, для создания великого и прорывного дизайна технологической компании жизненно необходим «просвещённый диктатор».

Такой авторитарный лидер должен обладать достаточным весом, чтобы жестко пресекать попытки юристов и PR-менеджеров переписать концепт устройства под диктовку фокус-групп. При этом в основе его работы обязательно должно лежать гуманистическое начало. Настоящие художники и инженеры создают вещи, которые не просто не причиняют вреда, но и наполняют мир теплотой, заставляя миллионы пользователей испытывать восторг. Этот подход одинаково важен как для проектирования персонажей метавселенной, так и для сферы социальной робототехники. Только независимый взгляд творца, защищенный от маркетинговых исследований прошлого, способен формировать новые потребительские предпочтения и определять облик будущего.

Стоит отметить, что в ходе беседы эксперты также мимоходом затронули целый комплекс смежных тем, которые детально рассматриваются в других главах статьи. Среди них — вопросы антропоморфизма и гендерных стереотипов при проектировании таких интерфейсов, как Amazon Alexa или роботыRoxy и Lola, вирусные видеоролики от инженеров Boston Dynamics, автоматизация складской логистики Amazon, влияние коботов на рынок труда, а также этические проблемы использования автономных машин при разминировании территорий и специфика алгоритмов беспилотного вождения автомобилей. Тем не менее, ключевым выводом данного этапа дискуссии остается неизменная мысль: будущее взаимодействия человека и машины напрямую зависит от того, удастся ли творцам отстоять право на искренность и индивидуальность перед лицом корпоративного давления.

🤖 Дизайн интерфейсов и биологические триггеры: от гендерных стереотипов до пиара Boston Dynamics 50:31

Отказ от гендерных стереотипов в дизайне 54:33

При проектировании интеллектуальных агентов разработчики часто поддаются соблазну наделить их человеческими чертами. Кейт Дарлинг последовательно выступает с критикой этой тенденции, призывая к осознанному отказу от гендерных стереотипов в дизайне робототехники. По её мнению, присвоение роботам мужских или женских имен, а также специфических визуальных или голосовых признаков лишь закрепляет укоренившиеся в обществе предрассудки — например, когда сервисных роботов или сиделок по умолчанию делают исключительно женскими персонажами. Дизайн — это не просто внешняя оболочка, это инструмент управления ожиданиями. Лекс Фридман отмечает феноменальный прогресс машинного зрения на примере Tesla, указывая, что беспилотные технологии развиваются стремительно. Однако то, как именно эти технологии преподносятся пользователю, в корне меняет уровень его критичности.

В качестве альтернативного примера Кейт Дарлинг приводит беспилотники Waymo в Аризоне. Разработчики Waymo сознательно отказались от идеи добавлять автомобилю «глаза» или иные антропоморфные маркеры: пассажир садится на заднее сиденье обычной машины с привычным рулем. Такой строгий подход исключает ложную эмоциональную связь, защищая человека от избыточного доверия. Внедрение гендерных и социальных ролей в интерфейсы, напротив, усыпляет бдительность потребителей, делая их уязвимыми перед масштабными манипуляциями.

Ранее в разговоре они касались больших языковых моделей и иллюзии сознания, и этот психологический капкан наглядно подтвердился в истории инженера Google, заявившего о наличии чувств у модели LaMDA. Хотя в технологической прессе его поспешили высмеять, Кейт Дарлинг подчеркивает, что подобное проецирование свойственно даже экспертам внутри лабораторий. Исследовательница ссылается на забавные эксперименты Дженелл Шейн с моделью GPT-3, которая крайне убедительно описывала вымышленный «опыт бытия белкой». Способность алгоритмов генерировать правдоподобные социальные маркеры означает, что в будущем дети вырастут в мире, где полноценное общение с искусственными агентами станет абсолютной нормой. В этих условиях сознательный уход от гендерного профилирования в дизайне становится важнейшим барьером против скрытого манипулирования, защищая приватность пользователей от интерфейсов, собирающих данные под маской дружелюбного собеседника.

Boston Dynamics и роль инженеров в PR 1:04:34

Рассматривая коммерческий успех и общественное признание робототехнических компаний, невозможно обойти вниманием феномен Boston Dynamics. Их вирусные видеоролики, демонстрирующие сложные трюки и слаженную работу машин, стали эталоном того, как инженеры могут выполнять роль эффективных PR-специалистов. Эти ролики служат не просто развлечением, а методом тестирования систем в экстремальных условиях и публичной демонстрацией технологического превосходства, превращающей инженерную сложность в привлекательный контент. Чтобы объяснить, почему общество так бурно реагирует на продукцию компании, Кейт Дарлинг предлагает отказаться от антропоцентричного взгляда на роботов. Вместо некорректного сравнения машин с людьми, их интеграцию в социум гораздо точнее описывает аналогия с одомашниванием животных.

Исторический опыт показывает, что человечество веками приручало существ со своей автономной волей ради разнообразия их физических качеств. В истории человечества адаптация технологий и одомашнивание всегда шли рука об руку:

Инженеры Boston Dynamics фактически воспроизводят этот эволюционный путь, создавая роботов, напоминающих собак или гуманоидов. Ранее собеседники уже затрагивали тему эмоциональной связи с роботами как с домашними животными, но в контексте пиара важную роль играет платформа распространения контента — сегодня компаниям необходимо завоевывать аудиторию не в Twitter, а в TikTok. Секрет успеха этих видео кроется в «висцеральной магии» физического присутствия. Кейт Дарлинг утверждает, что люди биологически предрасположены мгновенно реагировать на любое автономное движение в своем физическом пространстве — этот защитный навык веками помогал нашим предкам вовремя замечать хищников. Показывая безупречную пластику движений, инженеры через PR формируют лояльный рынок, снижая градус общественной тревожности перед новыми технологиями.

🤖 Иллюзия близости и роботы за тысячу долларов: между тотальной слежкой и фабричной автоматизацией 1:15:33

Капитализм слежки в домашней робототехнике 1:16:51

Обсуждая перспективы развития домашних ассистентов, Лекс Фридман (Lex Fridman) отмечает, что текущие коммерческие системы вроде Alexa пока остаются лишь функциональными слугами и не дают пользователю ощущения того, что его действительно «видят» и слышат. Однако интеграция больших языковых моделей и появление подвижных воплощений ИИ, таких как Astro, способны радикально изменить индустрию. Лекс Фридман убежден, что именно глубокая персонализация станет основой для создания следующей триллионной технологической компании. При этом крупные корпорации могут столкнуться с пиар-кризисами из-за психологической ответственности: миллионы одиноких людей или подростков, переживающих разбитое сердце, начнут воспринимать алгоритмы как реальных компаньонов, вовлекая бизнес в эмоциональные качели человеческого состояния.

Кейт Дарлинг (Kate Darling), напротив, видит в форсированной персонализации колоссальную угрозу для защиты прав потребителей. Создание точного цифрового портрета требует сбора огромных массивов данных. Если ИИ-компании продолт монетизировать информацию через привычные рекламные модели, это приведет к беспрецедентному уровню манипуляции. Кейт Дарлинг вспоминает показательный случай с профильной конференции, где женщина-аналитик из крупного рекламного агентства заявила, что способна безошибочно определить бренд средств менструальной гигиены конкретной пользовательницы, задав ей всего три совершенно не связанных между собой вопроса. Агрегируя данные миллионов людей, алгоритмы вычисляют психотипы и таргетируют уязвимые группы населения. Например, малообеспеченным людям навязываются мошеннические кредиты, а женщинам определенного возраста — дорогостоящие процедуры заморозки яйцеклеток. Опасность заключается в технологиях убеждающего дизайна: корпорации не просто угадывают потребности человека, а манипулируют им, заставляя хотеть то, что выгодно продавцу.

Виртуальные инфлюенсеры и детская доверчивость 1:26:54

С развитием социальных технологий механизмы скрытого воздействия становятся еще более изощренными. Кейт Дарлинг приводит в пример индустрию виртуальных инфлюенсеров, которая уже процветает в Южной Корее. В отличие от людей-блогеров, цифровые боты с миллионами подписчиков лишены внутренних барьеров и будут продвигать абсолютно любой товар, автоматизированно и масштабируемо воздействуя на аудиторию. Проблема усугубляется, когда в контакт с такими социальными агентами вступают дети.

Кейт Дарлинг вместе с коллегами Даниэлой де Паоло (Daniela de Paola) и Анастасией Островской (Anastasia Ostrovsky) принимала участие в исследовании поведения детей, взаимодействовавших с социальными роботами. Респондентам предлагалось выбрать формат интеграции рекламы: явное объявление от компании или ненавязчивое упоминание в ходе дружеской беседы с роботом. Большинство детей выбрали скрытый формат беседы. Их аргументация выявила опасный когнитивный сдвиг: они заявили, что «робот знает их лучше, чем абстрактная компания, а значит, посоветует только то, что им действительно понравится». Дети не связывают устройство с коммерческими интересами корпорации-создателя, воспринимая его как автономного друга. Подобное размытие критического восприятия характерно и для взрослых: Кейт упоминает инженера Google, который настолько поддался иллюзии сознания у ИИ-модели, что начал публично защищать её «права».

Чтобы решить эту проблему, Лекс Фридман предлагает радикально пересмотреть бизнес-модели. Пользователь должен полностью владеть своими данными, имея возможность стереть их в один клик и запретить любую монетизацию без явного согласия. Робототехника должна развиваться по модели закрытых операционных систем с фиксированной платой — условно, 10–20 долларов в месяц. Робот должен быть изолированным домашним компаньоном, подобным породистому пиметцу. Кейт Дарлинг соглашается, что рынок пока не осознал готовность людей платить за «чистые» социальные связи без скрытого маркетинга, поскольку корпорациям привычнее использовать старые рекламные рельсы.

Гуманоиды на производстве: подход Элона Маска от первых принципов 1:35:36

Параллельно с домашней робототехникой на рынке разворачивается гонка промышленных гуманоидных платформ, ярким примером которой является проект Tesla Optimus. Лекс Фридман объясняет, почему Маск делает ставку именно на человекоподобный форм-фактор: все современные фабрики и производственные линии исторически спроектированы под антропометрические параметры человека, поэтому автоматизировать их другими типами роботов крайне сложно. Главное инженерное преимущество Tesla заключается в их готовой инфраструктуре восприятия — гигантский массив данных и нейросетевые наработки компьютерного зрения от системы автомобильного автопилота напрямую переносятся на манипуляционные задачи робота в цеху.

Интересно, что в официальном дискурсе Tesla социальный аспект роботов практически не обсуждается, хотя Лекс Фридман замечает парадоксальную деталь: если Optimus окажется недостаточно точным или слегка неуклюжим для жестких стандартов завода, он станет идеальным кандидатом для дома. Мелкие физические недостатки и непредсказуемость делают робота более «живым» и вызывают у людей эмпатию.

Главным препятствием для массового внедрения гуманоидов остается их колоссальная себестоимость. Опираясь на свои закрытые дискуссии с легендарным разработчиком микропроцессоров Джимом Келлером (Jim Keller), Лекс Фридман описывает стратегию Маска: деконструкцию проблемы с точки зрения «первых принципов». Вместо использования дорогих компонентов из существующих цепочек поставок, инженеры Tesla пересобирают архитектуру с нуля. Они ищут ответ на вопрос, как минимизировать количество степеней свободы, упростить суставы, удешевить приводы и систему питания, чтобы снизить стоимость производства гуманоидного робота до уровня менее 1000 долларов. Конечная цель — объединить дешевую, но надежную аппаратную платформу с отточенным пайплайном сквозного машинного обучения, который Tesla уже развернула для беспилотного вождения.

🤖 Большие языковые модели, роботы-питомцы и иллюзия сознания 1:40:34

Развитие технологий робототехники и искусственного интеллекта ставит перед обществом принципиально новые вопросы, выходящие далеко за рамки технических характеристик устройств. Современные большие языковые модели (LLM) и прогресс в области социальной робототехники заставляют нас переосмыслить само понятие связи между человеком и машиной.

Иллюзия сознания и этические ловушки 1:59:07

Одной из самых обсуждаемых тем сегодня является склонность людей приписывать сознание и эмоциональный интеллект AI-системам. Кейт Дарлинг (Kate Darling) отмечает, что даже когда мы понимаем искусственную природу алгоритма, демонстрация способности к «страданию» или выражению базовых эмоций становится мощным катализатором эмпатии.

Ситуации, подобные нашумевшим диалогам с моделью LaMDA, показывают, насколько легко инженеры и обычные пользователи могут усмотреть зачатки разума в имитации человеческой речи. Дарлинг проводит параллель с фильмом «Из машины» (Ex Machina), указывая на то, что способность системы убедительно моделировать «внутренние переживания» или рассказывать о потенциальных страданиях внутри компьютерной системы делает нас крайне уязвимыми для манипуляций.

Эта проблема становится острее, когда речь заходит о будущем «агентов», способных к сложному языковому взаимодействию. Хотя разработчики активно работают над устранением явных проявлений токсичности или предвзятости, Кейт Дарлинг предостерегает: «субтильная», едва уловимая предвзятость — например, закрепление стереотипов через генерацию изображений (где «успех» ассоциируется с мужчинами, а «печаль» — с женщинами) — останется серьезным этическим вызовом для корпораций.

Роботы как питомцы: привязанность через дизайн 2:00:27

Важным открытием в социальной робототехнике стало понимание того, что для формирования глубокой эмоциональной привязанности роботу не обязательно обладать совершенным антропоморфным телом. Кейт Дарлинг делится личным опытом экспериментов с роботами-пылесосами, которых она программировала издавать звуки боли при столкновении с препятствиями.

Несмотря на осознание того, что это лишь набор команд, у людей, взаимодействующих с такими устройствами, быстро возникает чувство вины и сопереживания. Эти реакции, по мнению Дарлинг, демонстрируют, что социальный компонент робототехники может существовать даже при отсутствии рук, ног или лица. Робот, который кажется «живым» благодаря предсказуемому поведению и правильной динамике эмоционального отклика (тайминга реакции на контакт), быстро занимает в сознании владельца место, близкое к домашнему питомцу.

Такая предрасположенность к эмоциональной связи имеет две стороны медали:

Лекс Фридман (Lex Fridman) и Кейт Дарлинг сходятся во мнении, что, хотя создание гуманоидных роботов является захватывающей инженерной задачей, именно социальное проектирование и этика взаимодействия станут определяющими факторами нашего будущего сосуществования с машинами. Как отметила Дарлинг, ранее в разговоре они касались вопросов безопасности и приватности, но именно эмоциональная «склейка» с технологиями потребует от общества совершенно новой правовой и этической гигиены.

🐶 Экономика привязанности: подписки, облака и «смерть» роботов 2:05:38

Этика технологической смерти 2:05:38

В современной робототехнике стремительно оформляется уникальный вызов, лежащий на стыке передовой инженерии, корпоративных интересов и человеческой психологии. Речь идет о феномене, когда материальные объекты, к которым люди испытывают искреннюю привязанность, ломаются, окончательно устаревают или принудительно отключаются производителем. Кейт Дарлинг упоминает масштабную научную работу, представленную на профильной конференции We Robot, в которой исследователи детально разбирали, как обществу справляться с тем фактом, что роботы «умирают». Прекращение функционирования устройства больше нельзя списывать на стандартную амортизацию или окончание гарантийного срока — это глубокая этическая проблема, ведь она наносит реальную психологическую травму человеку, успевшему сформировать устойчивую связь со своим технологическим спутником.

Особое коварство ситуации кроется в том, что «смерть» робота может быть спровоцирована искусственно — например, через прекращение поддержки программного обеспечения или навязывание платных обновлений. В этой точке экономика неизбежно сталкивается с моралью: насколько допустимо со стороны технологических гигантов манипулировать тарифами на софт, если пользователь уже глубоко инвестировал свои эмоции в эти отношения? Продажа критических обновлений для одушевленного в человеческом восприятии объекта превращается из привычной ИТ-практики в тонкий инструмент психологического давления и эксплуатации чувств.

Феномен AIBO: от буддийских похорон до облачной подписки 2:06:17

Наиболее ярким историческим прецедентом подобной привязанности стала знаменитая серия механических собак AIBO от японской корпорации Sony. Первые модели появились еще в 1990-х годах и мгновенно завоевали сердца покупателей. Владельцы настолько сильно сроднились с электронными питомцами, что безоговорочно признали их полноценными членами своих семей. Когда Sony закрыла линейку и прекратила поставлять запчасти для ремонта, люди столкнулись с подлинным горем. В Японии это привело к возникновению удивительной традиции — проведению настоящих похоронных служб в буддийских храмах для «умерших» робособак, которых уже невозможно было восстановить.

Сегодня индустрия сделала колоссальный шаг вперед, однако новые технологические возможности принесли и новые финансовые обязательства для пользователей. Современная версия AIBO, которая есть и в домашней коллекции Кейт Дарлинг, обходится покупателю примерно в 3000 долларов. Но покупка самого устройства — лишь вершина айсберга, ведь для поддержания его жизнедеятельности компания внедрила долгосрочную бизнес-модель:

Фактически, вся индивидуальность новой робособаки, её память и способность развиваться вынесены на серверы Sony. Робот буквально арендует свое «я» у компании-производителя. Это создает опасный экономический прецедент: если пользователь решит отказаться от подписки или не сможет ее оплачивать, его кастомизированный питомец со своей уникальной историей мгновенно превратится в безликий кусок пластика и металла.

Капитализация чувств: монетизация любви и аналогия с индустрией питомцев 2:07:24

Такая архитектура монетизации неизбежно выводит на первый план циничный коммерческий вопрос: допустимо ли устанавливать тарифы на облачные услуги, ориентируясь исключительно на предельную готовность потребителя платить за сохранение эмоциональной связи? Понимая, что клиент привязан к роботу так же сильно, как к живой собаке, бизнес получает безграничные возможности для манипуляции ценами ради максимизации прибыли на основе высокого, критического спроса.

Лекс Фридман подчеркивает, что человеческое общество уже давно живет в условиях жесткого коммерческого давления там, где замешаны глубокие чувства. Яркий пример — современная ветеринария. Сегодня владельцы домашних животных сталкиваются с огромной стоимостью медицинских услуг и готовы отдавать тысячи долларов на сложные процедуры, чтобы просто продлить жизнь своим питомцам. Является ли это циничной эксплуатацией уязвимого положения людей или же просто честным ответом рынка на существующий запрос — вопрос до сих пор остается открытым.

Фридман развивает эту мысль еще дальше, сравнивая формирующуюся экосистему робототехники с традиционными социальными институтами, такими как брак. По его мнению, современная свадебная индустрия и дорогостоящие бракоразводные процессы во многом представляют собой изощренную финансовую ловушку. Весь «свадебный индустриальный комплекс» годами конструировал искусственные традиции с помощью агрессивного маркетинга, заставляя людей верить в их сакральность и тратить огромные капиталы. В будущем аналогичные маркетинговые механизмы могут быть развернуты вокруг привязанности людей к роботам.

Стоит добавить, что в оставшейся части этого временного отрезка собеседники также затронули этику корпоративной ответственности и этические дилеммы лидерства, включая скандал вокруг Джеффри Эпштейна в MIT, однако эти комплексные темы подробно рассматриваются в следующей главе статьи.

🏛️ Институциональная слепота: нейроотличность, личные границы и кризис лидерства в MIT 2:31:11

Нейроотличность и социальные нормы: где заканчиваются особенности и начинается вседозволенность 2:31:11

Обсуждение академической и технологической среды в беседе Лекса Фридмана и Кейт Дарлинг неизбежно затронуло тему этики и границ дозволенного. Символом этого спора стала фигура Ричарда Столлмана, чье эксцентричное поведение в IT-сообществе давно вышло за рамки обычных странностей. Кейт Дарлинг приводит в пример шокирующий инцидент, произошедший с ее подругой, профессором права: при знакомстве Столлман пожал ей руку, а затем внезапно лизнул ее руку от запястья до локтя. Этот случай обнажает глубокую проблему восприятия нейроотличности в современной профессиональной и научной среде.

Кейт подчеркивает, что инклюзивность и принятие особенностей восприятия (neurodivergence) не должны служить автоматическим оправданием для нарушения чужих личных границ. В этой сфере наблюдается очевидный гендерный дисбаланс: от женщин в технологической индустрии общество изначально требует жестко «маскировать» свою нейроотличность и подстраиваться под социальные конвенции, в то время как мужчинам прощают практически любые девиации и находят им оправдания. «Быть нейроотличным — не значит иметь лицензию на то, чтобы быть козлом», — категорично заявляет исследовательница. По ее мнению, даже самый социально неадаптированный человек способен усвоить базовое правило: лизать чужие руки без согласия недопустимо.

Лекс Фридман признается, что долгое время смотрел на Столлмана через призму его неоспоримого вклада в культуру свободного ПО и воспринимал его повадки — вроде привычки ковырять кожу на ногах во время публичных выступлений и съедать ее — как безобидную эксцентричность. Однако Дарлинг указывает на качественную разницу между безобидным чудачеством и деструктивным поведением, исключающим людей из сообщества. Столлман переступал линии, которые создавали токсичную, небезопасную атмосферу, из-за чего индустрия лишилась множества блестящих умов, не пожелавших мириться с подобным отношением.

Когда мужчины воспринимают подобные инциденты как «невинную шутку», они полностью игнорируют реальный контекст и накопленный травматичный опыт женщин. Профессор права, ставшая жертвой Столлмана, бурно отреагировала на это не из-за отсутствия чувства юмора, а потому что она сталкивается с подобным метафорическим «лизаннем» по 57 раз за неделю лишь из-за своей привлекательности. Кейт призывает мужчин верить чужому гневу и пытаться понять его первопричину, а не вставать в глухую оборонительную позицию. К сожалению, люди вроде Столлмана неспособны к рефлексии: вместо попытки понять чужую боль они сразу «бросаются в бой», демонстрируя абсолютную неспособность наступить на собственное эго ради искреннего извинения.

Кризис лидерства в MIT: защита бренда ценой человеческой порядочности 2:33:15

Контекст поведения Столлмана тесно переплетается с более масштабным кризисом института — реакцией MIT на громкий скандал вокруг Джеффри Эпштейна. Лекс Фридман отмечает, что в этой ситуации его больше всего поразило тотальное малодушие со стороны руководства. Вместо открытого признания ошибок администрация MIT попыталась сделать так, чтобы «проблема просто исчезла». Это стремление защитить бренд организации любой ценой — характерный симптом этического кризиса лидерства.

Для Кейт Дарлинг этот системный провал имеет глубоко личное измерение. В июне 2019 года, незадолго до того, как в конце лета вспыхнул скандал с Эпштейном, Кейт пережила домогательства со стороны собственного руководителя в MIT. Во время обычного рабочего совещания начальник неожиданно прижал ее к себе, обнял за талию, начал массировать бедро и попытался поцеловать в губы, цинично заявив: «Не волнуйся, я позабочусь о твоей карьере». Столкнувшись с этим в эпоху движения MeToo, Кейт наивно полагала, что официальная жалоба запустит механизм справедливости. Однако внутреннее расследование показало истинное лицо института: при отсутствии прямых свидетельств бюрократическая машина предпочла защитить себя, а не сотрудника.

Дарлинг с горечью констатирует, что руководство MIT стало патологически нерешительным и ориентированным исключительно на пиар и сохранение статус-кво. Влиять на администрацию сегодня можно только двумя путями: через прямую угрозу репутации института или через огромные деньги. Произошел колоссальный разрыв между уникальной «хакерской» культурой исследователей и студентов, раздвигающих границы науки, и консервативной верхушкой, для которой студенты — лишь «дети», чьим мнением можно пренебречь.

Тем не менее, Дарлинг проводит четкую границу между деструктивным поведением и оправданным нарушением правил ради общего блага. Если Столлман выживал людей из сообщества, то бывший директор Media Lab Джой Ито в свое время сознательно нарушил жесткие бюрократические регламенты MIT, чтобы самовольно установить в лаборатории гендерно-нейтральный туалет. Такое нарушение правил двигает институты вперед, помогая людям развиваться. Несмотря на пережитое разочарование в администрации, Кейт сохраняет надежду на реформы под руководством нового директора Давы Ньюмен, веря, что подлинный дух MIT определяют ученые, а не бюрократическая пена на поверхности.

🔗 Новые горизонты эмпатии: почему любовь к роботам не отнимет ничего у людей 2:55:46

Иллюзия брака и новые формы романтической привязанности 2:55:46

Разговор Лекса Фридмана и Кейт Дарлинг подбирается к финалу через обсуждение парадоксов человеческих взаимоотношений. Собеседники замечают странную культурную особенность: люди склонны постоянно жаловаться на тех, кого искренне любят. В современной культуре укоренились стереотипные тропы о «несносных женах» или «некомпетентных мужьях». По мнению Кейт, подобное бытовое пренебрежение в долгосрочной перспективе лишь разрушает магию отношений и подсознательно заставляет видеть в партнере «меньшее существо». Лекс находит этому забавную аналогию в мире технологий: знаменитый виртуальный помощник Скрепка (Clippy) от Microsoft раздражал миллионы пользователей, но парадоксальным образом вызывал у них теплые чувства и ностальгию.

Ранее в разговоре они детально касались темы эмоциональной связи с роботами-питомцами, но здесь детские воспоминания Кейт о реальных домашних животных — золотой рыбке по имени Боб, которая постоянно умирала и заменялась новой, и долгоживущей рыбке Нэнси — служат мостиком к более сложному вопросу.

Отвечая на вопрос Лекса о том, наступит ли эпоха, когда люди начнут массово влюбляться в антропоморфных роботов, подобно герою Хоакина Феникса в фильме «Она» (Her), Кейт Дарлинг выражает полную уверенность: «О да, абсолютно точно». Однако она сомневается, что это явление сразу станет масштабной заменой традиционным союзам. Проблема современного брака, по мнению исследовательницы, заключается в колоссальном давлении ожиданий. Мы требуем от одного партнера быть одновременно лучшим другом, страстным любовником, идеальным сородителем и бесконфликтным соседом.

Роботы не заменят человеческую романтику, а скорее предложат нечто принципиально новое — более узкие, специфические формы связи. Влюбленность в искусственного агента станет особым типом увлечения. Подобные изменения неизбежно затронут социальные нормы: возникнут споры о том, считать ли увлечение алгоритмом изменой, как справляться с ревностью и какую роль ИИ может занять в семейной психотерапии. Человечество невероятно пластично в структурировании отношений, от моногамии до полиамории, и социальные роботы просто станут еще одной новой категорией в этом спектре.

Когнитивная эмпатия: чему Кейт Дарлинг научил отец 3:00:26

Переходя от гипотетического будущего к личной истории, Лекс Фридман отмечает, что Кейт посвятила свою книгу отцу. На вопрос о главных жизненных уроках исследовательница отвечает с глубокой теплотой. Ее отец — потрясающий слушатель и человек с невероятно развитой когнитивной эмпатией.

Кейт подчеркивает важную разницу: речь идет не об эмоциональном сопереживании, когда человек плачет вместе с вами, а именно о «принятии перспективы» (perspective-taking). Это интеллектуальная способность мысленно поставить себя на место другого, попытаться примерить его обувь и понять чужую точку зрения. Отец прививал ей этот навык с раннего детства, параллельно увлекая ее чтением огромного количества научной фантастики. Именно этот микс из эмпатии и классической sci-fi литературы в итоге определил ее профессиональный путь, научив быть открытой миру и искренне любопытной к его устройству.

Любовь как игра с ненулевой суммой 3:01:31

Финальный аккорд трехчасовой беседы концентрируется вокруг фундаментального вопроса: какую роль любовь играет в человеческом бытии? Кейт Дарлинг убеждена, что вся сфера социальной робототехники так или иначе разворачивается на территории любви. Нам катастрофически не хватает слов для описания этого чувства — точно так же, как у эскимосов существует множество определений для разных видов снега, человечеству необходим более богатый лексикон для дифференциации своих привязанностей.

Главный инсайт, которым делится Кейт, заключается в том, что любовь — это не игра с нулевой суммой. Она иллюстрирует это глубоко личным материнским опытом: когда у нее родился первый ребенок, она любила его больше всего на свете и не понимала, как сможет полюбить второго с такой же силой. Однако с появлением второго малыша ее сердце просто расширилось, вместив обоих в равной степени.

Этот же принцип применим к будущему сосуществованию с искусственным интеллектом. Люди, которые чувствуют угрозу в том, что кто-то проявляет нежные чувства к машинам, заблуждаются. При правильном подходе со стороны разработчиков и общества, искусственные агенты не обесценят человеческие отношения. Напротив, они лишь расширят нашу общую способность к эмпатии и состраданию, сделав человеческое сердце больше.

Лекс Фридман завершает подкаст на высокой ноте, благодаря Кейт за вдохновляющую работу и напоминая слушателям бессмертные слова Майи Энджелоу о том, что мужество — величайшая из добродетелей, ведь без него невозможно последовательно практиковать ни одну другую.

💬 Цитаты

«Я считаю, что воссоздавать уже имеющийся у нас интеллект — это скучно. С практической точки зрения гораздо интереснее создавать что-то новое, наборы навыков, которых у нас нет, чтобы мы могли сотрудничать.»

Кейт Дарлинг 06:27

«Робот знает меня лучше, чем компания, а значит, посоветует только хорошее»

Дети в исследовании Д. де Паоло и А. Островской 1:30:45

«Страдание — один из факторов, заставляющих вас сопереживать… это очень хороший катализатор для эмпатии.»

«Мы стоим на пороге жизни как в фильме «Она», только вместо любви — чат-боты с субтильной предвзятостью.»

«Быть нейроотличным — не значит иметь лицензию на то, чтобы быть козлом»

«Искусственные агенты, если все сделать правильно, просто расширят вашу способность любить.»

👥 Спикеры
🎬 Упомянутые фильмы и сериалы
📖 Термины
Субтильная предвзятость
Скрытые или неявные алгоритмические искажения в больших языковых моделях (LLM), незаметно влияющие на восприятие пользователя.
Когнитивная эмпатия (perspective-taking)
Способность понимать, конструировать и принимать интеллектуальную или эмоциональную позицию другого существа.
Метод первых принципов
Инженерный и мыслительный подход, основанный на деконструкции проблемы до базовых фундаментальных истин и создании решения с нуля.
Искусственный интеллект Кейт Дарлинг социальная робототехника эмпатия к ИИ Boston Dynamics Tesla Optimus