Майлз Брандейдж и Тим Хванг об угрозах ИИ: «Технология двойного назначения»

Y Combinator 2,3 тыс. 45 мин 3 мин 25.04.2018
Главное

ИИ, риски и политика: как подготовиться к будущему, которое уже наступило 0:00

Сегодня искусственный интеллект прошел путь от нишевой научной дисциплины до «технологии двойного (или даже всестороннего) назначения». Майлз Брандейдж, эксперт по политике в сфере ИИ, и Тим Хванг, специалист по государственному регулированию технологий, обсудили, почему ИИ требует новых норм безопасности, сопоставимых с биотехнологиями или кибербезопасностью. Эксперты сходятся во мнении: хотя сегодня внимание индустрии приковано к хайпу вокруг криптовалют, реальные вызовы — от манипуляций с данными до создания автономного оружия — требуют серьезного междисциплинарного анализа и прозрачности.

🛡 Риски злоупотребления: от дипфейков до кибератак 0:37

Центральная тема обсуждения — доклад Майлза Брандейджа «Злонамеренное использование искусственного интеллекта» (Malicious Use of Artificial Intelligence). Авторы подчеркивают, что угроза исходит не только от случайных алгоритмических ошибок, но и от преднамеренного использования технологий злоумышленниками.

Основные векторы угроз, выделенные экспертами:

По словам Тима Хванга, сегодня мы видим «демократизацию» вредоносных инструментов благодаря облачным сервисам, которые предоставляют вычислительные мощности любому желающему.

🏥 ИИ в медицине и «проблема интерпретируемости» 13:18

Одной из самых перспективных областей эксперты называют медицину: системы уже демонстрируют «сверхчеловеческие» результаты в дерматологии и диагностике рака пищевода. Однако здесь возникает конфликт между эффективностью и доверием.

Тим Хванг упоминает работу Закари Липтона (Zack Lipton) «Врач просто не примет это», в которой ставится вопрос: станет ли отсутствие интерпретируемости барьером для внедрения ИИ, или рынок проигнорирует требования регуляторов ради эффективности?

🌏 Геополитика, регулирование и «баланс сил» 10:54

Вопрос о лидерстве в сфере ИИ становится вопросом национальной безопасности. Брандейдж и Хванг отмечают существенные различия в подходах к регулированию:

  1. США: Предпочитают точечное, кейсовое регулирование для отдельных отраслей (например, медицина).
  2. ЕС: Движется в сторону широких правовых рамок, таких как GDPR, которые затрагивают автоматизированное принятие решений в целом.
  3. Китай: По мнению экспертов, приоритет отдается стремительному внедрению технологий без существенных ограничений, связанных с интерпретируемостью.

Эксперты уверены, что для предотвращения международных конфликтов необходимо внедрять практики «доверия через проверку» (trust but verify) — механизмы аудита, которые могли бы подтвердить, что системы ИИ соответствуют заданным этическим нормам.

🔮 Прогнозы: чего ждать в ближайшие 3 года? 44:09

Майлз Брандейдж поделился своими ожиданиями на среднесрочную перспективу:

💬 Цитаты

«ИИ — это технология двойного или даже всестороннего назначения.»

Майлз Брандейдж 01:16

«Интерпретируемость — это изучение методов, позволяющих понять, почему система принимает те или иные решения.»

Тим Хванг 18:16
👥 Спикеры
📚 Упомянутые книги
🔗 Упомянутые сайты и проекты
📖 Термины
Интерпретируемость (Interpretability)
Способность системы ИИ объяснять логику своих решений человеку.
Робастность (Robustness)
Устойчивость системы к внешним помехам, ошибкам данных или преднамеренным атакам.
Мета-обучение (Meta-learning)
Процесс обучения алгоритмов, которые способны самостоятельно проектировать или улучшать другие модели ИИ.
Дипфейк (Deepfake)
Технология синтеза медиаконтента (видео, аудио) с использованием нейросетей.
📊 Цифры
⚖️ Другая сторона
Искусственный интеллект Artificial Intelligence Cybersecurity Deepfakes Interpretability AI Governance