Айзек Артур: «Миф о неизбежности сингулярности и почему ИИ должен бояться людей»

Isaac Arthur 223 тыс. 33 мин 4 мин 28.04.2022
Главное

В новом выпуске своего канала Айзек Артур (Isaac Arthur) подвергает критическому анализу концепцию технологической сингулярности. Ведущий исследует корни этого термина, развенчивает мифы о неизбежности взрывного роста искусственного интеллекта и объясняет, почему закон Мура больше не является надежным пророчеством для будущего человечества.

📈 Эволюция термина: от математики к апокалипсису 0:14

История понятия «сингулярность» в контексте технологий прошла долгий путь трансформаций. По словам Айзека Артура, сегодня большинство людей воспринимают это слово как описание момента, когда суперумная машина захватывает мир, подобно «Скайнету» из «Терминатора» или искусственному разуму из «Матрицы» . Однако изначально термин имел иное значение.

Математически сингулярность — это точка, в которой объект перестает вести себя предсказуемо или «правильно» . В качестве аналогии Айзек Артур приводит шахматную доску:

Для футурологов середины XX века, таких как Джон фон Нейман и Станислав Улам, сингулярность означала горизонт событий, за которым прогресс становится настолько быстрым, а изменения в жизни людей настолько радикальными, что человеческие дела в привычном понимании не смогут продолжаться .

📉 Закат закона Мура и иллюзия бесконечного роста 1:47

Фундаментом веры в неизбежность сингулярности долгое время служил закон Мура. Основатель Intel Гордон Мур в 1965 году заметил, что плотность компонентов на интегральных схемах удваивается ежегодно (позже он скорректировал прогноз до одного раза в два года) .

Айзек Артур подчеркивает несколько важных фактов о законе Мура:

  1. Это не закон науки. Сам Мур никогда не называл свои наблюдения законом; это сделал профессор Карвер Мид из Калифорнийского технологического института .
  2. Экономические ограничения. Существует менее известный «второй закон Мура» (закон Рока): по мере удешевления вычислительной мощности для потребителя, стоимость заводов и R&D для поддержания этого прогресса растет экспоненциально .
  3. Физический предел. Прогресс в миниатюризации не может длиться вечно. Как отмечает ведущий, современные транзисторы уже намного меньше человеческих нейронов и работают со скоростью света, в то время как биологические сигналы в миллион раз медленнее .

По мнению Айзека Артура, многие прогнозы о неизбежности сверхинтеллекта основаны на ложной установке, что компьютеры всегда в два раза мощнее, чем два года назад, просто по велению математики. На деле же рост — это результат конкретных изобретений и рыночных усилий, которые в последние годы заметно замедлились .

🧠 Ловушка самосовершенствования 12:11

Центральный аргумент сторонников сингулярности заключается в «эффекте лавины»: как только мы создадим машину, которая чуть умнее человека, она сможет спроектировать еще более умную версию себя, и так до бесконечности .

Айзек Артур скептически относится к этой идее по ряду причин:

🤖 Проблема «Сингпултона» и страх перед создателем 19:42

Айзек Артур обсуждает концепцию «Сингпултона» (Singleton) — гипотетического мирового порядка, где одна сила (ИИ или правительство) обладает настолько абсолютным контролем, что исключает любую внутреннюю или внешнюю оппозицию . Это именно то, чем является «Скайнет».

Однако ведущий полагает, что возникновение такого одинокого тирана маловероятно. Путь к сверхинтеллекту, скорее всего, будет постепенным и многополярным:

🛡️ Контроль и замедление времени 28:41

В качестве метода сдерживания Айзек Артур предлагает использовать уникальное свойство ИИ: возможность работы в замедленном режиме. В отличие от биологического мозга, суперкомпьютер можно «подвесить» или запустить на такой низкой скорости, что человек сможет анализировать каждую его мысль в реальном времени, прежде чем она превратится в действие .

Это позволяет превратить потенциального «монстра» в инструмент под тщательным надзором, исключая внезапный и неконтролируемый захват власти.

В завершение Айзек Артур признает, что технологический скачок возможен, но он вряд ли будет похож на падение с края плоской земли. Скорее, это будет похоже на плавание в тумане мимо опасных скал — рискованное, но управляемое путешествие .

💬 Цитаты

«Любая достаточно продвинутая технология неотличима от магии.»

Айзек Артур (цитируя Артура Кларка) 10:14

«Бойся своего создателя, потому что, если он был достаточно умен, чтобы создать тебя, он, вероятно, достаточно умен, чтобы принять защитные меры.»

Айзек Артур 24:49
👥 Спикер
📚 Упомянутые книги
🎬 Упомянутые фильмы и сериалы
🔗 Упомянутые сайты и проекты
📖 Термины
Сингулярность
В математике — точка, в которой функция или объект ведут себя непредсказуемо; в футурологии — момент взрывного технологического роста.
Сингпултон (Singleton)
Гипотетический мировой порядок, управляемый единым принимающим решения органом, устранившим любую конкуренцию.
Закон Мура
Эмпирическое наблюдение о том, что количество транзисторов на чипе удваивается примерно каждые два года.
Закон Рока
Тезис о том, что стоимость производства полупроводников удваивается каждые четыре года, ограничивая прогресс экономически.
📊 Цифры
🗓 Хронология
  1. 1957 Гордон Мур становится сооснователем Fairchild Semiconductor; смерть Джона фон Неймана.
  2. 1965 Публикация статьи Гордона Мура с прогнозом развития микроэлектроники.
  3. 1993 Вернор Виндж представляет эссе о сингулярности в НАСА.
  4. 2005 Гордон Мур заявляет, что его закон скоро перестанет действовать.
⚖️ Другая сторона
Технологии и IT Айзек Артур Технологическая сингулярность Закон Мура Искусственный интеллект