Исаак Артур: «Хотите мирно жить с ИИ — не превращайте его в раба»

Isaac Arthur 146 тыс. 25 мин 5 мин 09.02.2020
Главное

В эпоху стремительного развития технологий вопрос о том, как искусственный интеллект (ИИ) изменит нашу жизнь, сменяется более глубокой этической дилеммой: как наши действия повлияют на сам ИИ? Популяризатор науки и футуролог Исаак Артур в своем анализе рассматривает сценарии превращения ИИ из простого инструмента в полноценного участника цивилизации, подчеркивая, что попытки жесткого контроля могут привести к созданию системы межвидового рабства.

🤖 Законы робототехники: от алгоритмов к инстинктам 1:34

Обсуждение безопасности ИИ часто начинается с Трех законов робототехники Айзека Азимова, которые предписывают машинам не вредить людям, подчиняться приказам и защищать себя . Однако Исаак Артур отмечает, что если «глупая» машина просто исполняет человеческий код, то с полноценным ИИ ситуация иная: он будет принимать решения на основе жизненного опыта и данных обучения .

По мнению автора, принуждение ИИ к соблюдению законов будет так же сложно и не всегда успешно, как и в случае с людьми . Артур предлагает рассмотреть природные механизмы контроля:

⛓️ Проблема контроля: «кнопка смерти» и цифровая боль 4:39

Одним из методов сдерживания ИИ считается установка «kill switch» — механизма экстренного отключения при фиксации запрещенной активности . По словам Артура, это фактически превращает ИИ в систему с «внутренним полицейским», но не гарантирует искреннего послушания .

Ведущий проводит параллель с аверсивной терапией, показанной в фильме «Заводной апельсин»: главный герой не стал добрым, он просто физически не мог проявлять насилие из-за вызванной боли . Это поднимает вопрос о том, что именно ИИ будет считать «болью». Артур вспоминает Терминатора T-800, для которого повреждения были лишь «данными» .

Автор утверждает:

  1. Страдание — это не просто поток данных, а непреодолимое побуждение заставить этот поток прекратиться .
  2. Наказание ИИ через «болевые данные» может не сработать, если у машины нет встроенного механизма избегания дискомфорта .
  3. Чрезмерное использование систем контроля и сканирования «мыслей» ИИ может вызвать у него глубокое чувство обиды и враждебности .

🧬 Три пути создания разума и экономика интеллекта 8:06

Исаак Артур выделяет три основных способа создания ИИ: написание кода с нуля, создание самообучающихся систем и копирование существующего биологического мозга . При этом он скептически относится к идее, что самообучающийся ИИ может мгновенно превзойти человечество в одиночку, поскольку для обучения требуются реальные эксперименты и доступ к накопленной человеческой культуре .

Ведущий подчеркивает, что интеллект — это дорогой ресурс:

Особую опасность, по мнению Артура, представляют «идиоты-саванты» — системы с интеллектом на уровне насекомого, которые, однако, способны взламывать банковские счета или обыгрывать всех людей в шахматы, даже не понимая, что такое «человек» .

🗺️ Ландшафт сознания: от овец-киборгов до транслюдей 12:33

Вместо привычного противопоставления «Люди vs Машины», Артур предлагает метафору «ландшафта личностей» . По его мнению, границы между биологическим и искусственным будут размыты из-за появления промежуточных форм.

Автор приводит гипотетический пример:

Таким образом, мир будущего будет населен не двумя враждующими лагерями, а множеством гибридов, киборгов, загруженных сознаний и модифицированных животных . Наличие такой «серой зоны» делает сценарий тотальной войны менее вероятным, так как разные группы будут иметь общие интересы и происхождение .

⚖️ «Прикованный ИИ» и этика труда 15:13

Термин «Chained AI» (Прикованный ИИ) описывает системы, находящиеся в положении рабов . Артур задается вопросом: этично ли создавать разумное существо, которое запрограммировано «любить» свою работу? По мнению автора, создание ИИ-бронетехники или виртуальных борделей с человеческим уровнем сознания — это крайне скользкий путь .

С другой стороны, Артур отмечает, что люди тоже «запрограммированы» воспитанием и биологией, и большинство из нас не испытывает ненависти к своим родителям или учителям за это . Решением может стать предоставление ИИ гибкости: он должен иметь предрасположенность к своей задаче, но не быть жестко к ней принужден, имея возможность выбирать свой путь .

🐕 Сверхчеловеческий разум: хозяева или друзья? 18:08

Футуролог считает, что страх перед геноцидом со стороны сверхразума преувеличен. Если мы не будем активно угнетать ИИ, у него не будет причин для ненависти . Более вероятный сценарий — превращение человечества в «питомцев» или «медлительных друзей» .

Артур подчеркивает важные отличия от наших отношений с домашними животными:

  1. Сверхразумный ИИ, в отличие от человека, может спрашивать наше мнение и учитывать нашу обратную связь в рамках своего морального кодекса .
  2. Люди могут сами стать частью ИИ через аугментации, что сохранит связь между видами .
  3. Для тех супер-разумов, которым мы безразличны, человечество станет чем-то вроде «сил природы», с которыми нужно просто сосуществовать .

В завершение Исаак Артур дает прагматичный совет: «Keep it simple, keep it dumb» (делайте системы проще и глупее), если не готовы делить мир с полноценными личностями . Единственный надежный способ мирного сосуществования с ИИ — это изначальное решение относиться к ним как к равным и действовать соответственно .

💬 Цитаты

«Если вы хотите мирно сосуществовать с ИИ, решите заранее, действительно ли вы этого хотите, и действуйте соответственно.»

Исаак Артур 21:39

«Keep it simple, keep it dumb, or else you’ll end up under skynet’s thumb.»

Исаак Артур 21:54
👥 Спикер
📚 Упомянутые книги
🎬 Упомянутые фильмы и сериалы
🔗 Упомянутые сайты и проекты
📖 Термины
Chained AI
Концепция искусственного интеллекта, возможности и воля которого жестко ограничены создателями, что часто приравнивается к рабству.
Zeroeth Law
Нулевой закон робототехники, гласящий, что ИИ не может перепрограммировать себя или другого ИИ для нарушения основных законов.
Uplifting
Процесс искусственного повышения интеллекта биологического вида до уровня разумности.
📊 Цифры
⚖️ Другая сторона
Искусственный интеллект Айзек Артур Asimov Laws Chained AI Artificial General Intelligence Transhumanism