Уэс Рот: «Секретная война за контроль над AGI — это глобальный захват власти»

Wes Roth 47 тыс. 29 мин 5 мин 14.04.2024
Главное

В мире высоких технологий разворачивается невидимое, но крайне масштабное противостояние за право определять будущее искусственного интеллекта. За кулисами увольнений в OpenAI, многомиллионных пожертвований и попыток глобального регулирования стоят две полярные идеологии: «эффективный альтруизм», предрекающий гибель человечества, и «техно-оптимизм», видящий в прогрессе единственный путь к спасению.

🚪 Увольнения в OpenAI и тени «эффективного альтруизма» 0:00

Недавние события в компании OpenAI вновь привлекли внимание к внутренним конфликтам, которые начались ещё в ноябре 2023 года с временного увольнения Сэма Олтмена. По информации автора канала Уэса Рота, исследователи OpenAI Леопольд Ашенбреннер и Павел Измайлов были уволены за утечку конфиденциальной информации . Оба специалиста работали над вопросами безопасности ИИ и рассуждениями (reasoning) .

Автор видео подчёркивает, что уволенные сотрудники имели тесные связи с движением «эффективного альтруизма» (Effective Altruism, EA) . История EA началась в 2011 году, когда Питер Сингер, Тоби Орд и Уильям Макаскилл провозгласили своей целью использование доказательств и разума для поиска наиболее эффективных способов помощи человечеству .

Однако, по мнению Рота, за последние годы движение трансформировалось в нечто закрытое и подозрительное:

В состав совета директоров OpenAI, инициировавшего ноябрьский переворот, входили Таша Макколи и Хелен Тонер, также связанные с «эффективным альтруизмом» . По словам Рота, они отказывались давать внятные объяснения своим действиям даже генеральным прокурорам, прикрываясь туманными фразами об «ответственности перед миссией AGI» .

🌍 Глобальное правительство и экзистенциальные риски 7:41

Одним из наиболее спорных моментов философии «эффективного альтруизма» является отношение к рискам вымирания (Extinction Risk). Тоби Орд, один из основателей движения, в своей книге предлагает создать международное правовое поле, которое позволило бы наказывать правительства и глав государств за действия, создающие «ненужный риск вымирания» .

Уэс Рот интерпретирует подобные предложения как стремление к созданию единого мирового правительства:

  1. Такая структура стояла бы выше демократически избранных лидеров .
  2. Она получила бы право лишать власти и сажать в тюрьму любого, кто, по её мнению, представляет «экзистенциальную угрозу» .
  3. Размытость определений риска даёт такой организации абсолютную, никем не контролируемую власть .

💰 Фонд на $755 млн и «война» Виталика Бутерина 9:50

В центре финансовой стороны этого противостояния оказался Виталик Бутерин, создатель Ethereum. В 2021 году он пожертвовал огромную сумму в токенах Shiba Inu (SHIB) Институту будущего жизни (Future of Life Institute, FLI) — организации, близкой к идеям EA .

Сумма пожертвования составила около $755 млн . Эти средства были обналичены через компанию Сэма Бэнкмана-Фрида Alameda Research и направлены на создание программы стипендий Виталика Бутерина по «экзистенциальной безопасности ИИ» . Примечательно, что в публичных отчётах FLI в качестве крупнейшего донора часто упоминается фонд Илона Маска с пожертвованием в $3–5 млн, в то время как судьба почти миллиарда долларов от Бутерина в ежегодных бюджетах до окончания полного аудита остаётся менее прозрачной .

📹 План Макса Тегмарка: запрет видеокарт и тотальная слежка 12:42

Макс Тегмарк, сооснователь Future of Life Institute, открыто выступает за жёсткое государственное регулирование ИИ. В одном из интервью он предложил радикальные меры для «спасения мира» :

Уэс Рот сравнивает такие предложения с мошенничеством: за привлекательным заголовком «защита от вымирания» скрывается попытка установить цифровую тиранию . Он призывает зрителей «быть как Ларри» (персонаж Ларри Дэвида из рекламы FTX), то есть сохранять скептицизм в отношении громких обещаний и инноваций, которые могут оказаться инструментом захвата власти .

🚀 Техно-оптимизм против «торможения» 18:59

В противовес сторонникам замедления (deceleration) выступает движение техно-оптимистов, наиболее ярким представителем которых является Марк Андриссен (фонд a16z) . В своём «Манифесте техно-оптимиста» они провозглашают:

Андриссен считает, что элиты сегодня пропагандируют нигилистическое желание иметь меньше людей, меньше энергии и больше страданий ради призрачной безопасности .

⚖️ Позиция Виталика Бутерина: концепция d/acc 23:10

Виталик Бутерин старается занимать взвешенную позицию. В своём блоге он описал три взгляда на мир :

  1. Анти-технологический: безопасность осталась позади, впереди антиутопия. Требуется замедление и отказ от прогресса .
  2. Акселерационистский (e/acc): опасности позади, впереди утопия. Нужно ускоряться любой ценой .
  3. Взвешенный (d/acc): опасности позади, но впереди множество путей — как хороших, так и плохих .

Бутерин ввёл термин d/acc (defensive/decentralized acceleration — защитное или децентрализованное ускорение) . Он считает, что ИИ должен развиваться, но децентрализовано, чтобы избежать ситуации, когда одна авторитарная структура контролирует всё . Вероятность гибели человечества от ИИ (P Doom) Бутерин оценивает крайне низко — около 0,1 .

🛡️ Опасности нового регулирования ИИ 27:07

Уэс Рот выражает глубокую озабоченность законопроектами, которые продвигаются в ЕС и США . Согласно анализу автора, эти нормы могут наделить администраторов регуляторных органов беспрецедентными полномочиями:

Рот призывает каждого определить свою позицию в этом конфликте, иначе решение о будущем технологий и личных свобод будет принято без участия граждан .

💬 Цитаты

«Люди, которые хотят установить глобальный авторитарный режим наблюдения, чтобы защитить нас от чего-то неопределенного, пугают меня больше всего.»

«Наука — это вера в невежество экспертов. Я лучше буду иметь вопросы, на которые нельзя ответить, чем ответы, которые нельзя подвергнуть сомнению.»

Ричард Фейнман (цитируется по манифесту a16z) 22:19

«Наш враг — это стагнация, коррупция, регуляторный захват, контроль речи и контроль мыслей.»

Марк Андриссен (цитируется) 22:32
👥 Спикер
📚 Упомянутые книги
🔗 Упомянутые сайты и проекты
📖 Термины
AGI
Искусственный интеллект общего уровня, способный выполнить любую интеллектуальную задачу, доступную человеку.
P Doom
Вероятность того, что развитие ИИ приведет к катастрофе или вымиранию человечества.
e/acc
Эффективный акселерационизм — философское движение, призывающее максимально ускорять технологический прогресс.
d/acc
Децентрализованное/защитное ускорение — концепция Виталика Бутерина, делающая упор на защитные технологии и децентрализацию.
📊 Цифры
🗓 Хронология
  1. 2011 Основание движения эффективного альтруизма.
  2. Май 2021 Виталик Бутерин жертвует токены SHIB на сумму около $755 млн.
  3. Ноябрь 2022 Крах биржи FTX Сэма Бэнкмана-Фрида.
  4. Ноябрь 2023 Попытка увольнения Сэма Олтмена из OpenAI советом директоров.
  5. Апрель 2024 Увольнение Леопольда Ашенбреннера и Павла Измайлова из OpenAI за утечки.
⚖️ Другая сторона
Искусственный интеллект OpenAI Vitalik Buterin Future of Life Institute Effective Altruism d/acc