Уэс Рот: «OpenAI боится выпускать агентов из-за рисков взлома»

Wes Roth 48,5 тыс. 12 мин 4 мин 08.01.2025
Главное

Сфера искусственного интеллекта начала 2025 год с высокой активности: от новых амбициозных продуктов OpenAI до фундаментальных прорывов в проектировании микросхем. Ведущий канала Wes Roth Уэс Рот анализирует причины задержек долгожданных ИИ-агентов, публичный семейный конфликт Сэма Олтмена и радикальную смену курса Марка Цукерберга в вопросах модерации контента.

🤖 OpenAI Operator: почему релиз агентов откладывается 1:06

Компания OpenAI проявляет осторожность в выпуске своего следующего крупного продукта — ИИ-агентов. Несмотря на то что определенный функционал ожидается уже в этом месяце , полноценный запуск замедлился. Основной причиной задержки, по словам Уэса Рота, стали опасения по поводу «инъекций промптов» (prompt injections).

В коде ChatGPT и в отчетах профильных ресурсов (таких как Testing Catalog и The Information) были обнаружены следы новых функций:

Уэс Рот подчеркивает, что OpenAI опасается выпускать агентов в широкий доступ (а это около 300 млн пользователей), так как злоумышленники могут использовать инъекции промптов для кражи данных, например номеров кредитных карт или секретных документов . По мнению ведущего, это бесконечная игра в «кошки-мышки» между хакерами и командами безопасности (red teams) .

⚖️ Семейная драма Сэма Олтмена: иск сестры и позиция семьи 5:06

Вокруг генерального директора OpenAI Сэма Олтмена разгорается публичный скандал. Его сестра, Энни Олтмен, в течение долгого времени обвиняла брата в неподобающем поведении, а недавно, по сообщениям СМИ, подала судебный иск .

Сэм Олтмен, его братья и мать выпустили совместное заявление, в котором изложили свою версию событий:

Уэс Рот признается, что эта ситуация вызывает у него «gut-wrenching» (душераздирающее) чувство . Он поделился личной историей о близком друге, чья сестра страдала от прогрессирующих психических проблем и проявляла немотивированную ярость, теряя связь с реальностью . Из-за этого опыта Рот инстинктивно склонен верить версии Сэма Олтмена, хотя и подчеркивает, что это его личная предвзятость, а истинная картина событий остается неизвестной .

🎮 ИИ-напарник от Nvidia: будущее гейминга 8:10

Nvidia представила прототип ИИ-компаньона для видеоигр (на примере PUBG). Этот помощник работает на базе нейросетей и способен взаимодействовать с игроком в реальном времени .

Ключевые возможности технологии:

  1. Голосовое управление: игрок может отдавать вербальные команды ИИ.
  2. Тактическая поддержка: ИИ может «прикрывать спину» или помечать (пинговать) найденные предметы и врагов .
  3. Обучаемость: напарник способен обучаться и применять полуинтеллектуальные тактики боя .

Хотя игра с реальными людьми остается приоритетом, Уэс Рот считает, что подобные ИИ-напарники предложат уникальный игровой опыт .

🧬 «Нечеловеческий» дизайн: прорыв в проектировании чипов 9:04

В журнале Nature Communications опубликовано исследование ученых из Принстонского университета и Индийского технологического института. Они разработали методологию, при которой ИИ проектирует радиочастотные микросхемы .

Результаты работы поразили исследователей:

Рот проводит аналогию с AlphaGo, которая делала «инопланетные» ходы в игре го, сначала казавшиеся людям ошибочными, а затем приводившие к победе . Аналогичный прогресс наблюдается в проекте Eureka от Nvidia, где ИИ создает более эффективные алгоритмы вознаграждения для обучения роботов, чем люди .

🛡️ Марк Цукерберг и свободная речь: Meta меняет правила игры 11:31

Марк Цукерберг объявил о значительном культурном сдвиге в Meta. Компания планирует отказаться от традиционных внешних фактчекеров в пользу системы, аналогичной Community Notes (Сообщества) в социальной сети X (бывший Twitter) .

Аргументы Цукерберга и контекст изменений:

Рот с иронией демонстрирует популярный дипфейк-ролик, где лица Цукерберга и Маска наложены на кадры из фильма про Мистера Бина, иллюстрируя «списывание» идей одним технологическим гигантом у другого .

💬 Цитаты

«Оператор — это первое название продукта OpenAI, которое действительно имеет смысл.»

«Дизайны были неинтуитивными и вряд ли могли быть разработаны человеческим разумом, но они работали лучше.»

Кошик Сенгупта 10:11

«Фактчекеры были политически предвзяты и полностью разрушили доверие на платформе.»

Марк Цукерберг 11:45
👥 Спикер
🎬 Упомянутые фильмы и сериалы
🔗 Упомянутые сайты и проекты
📖 Термины
Инъекция промпта (Prompt injection)
Техника взлома ИИ-моделей, при которой пользователь вводит специальные инструкции, заставляющие систему игнорировать правила безопасности.
Community Notes
Система проверки фактов силами самих пользователей, ставшая популярной в соцсети X.
Red teaming
Процесс тестирования систем безопасности путем имитации реальных атак.
📊 Цифры
🗓 Хронология
  1. Январь 2025 Ожидаемый частичный релиз функционала агентов OpenAI.
  2. Январь 2025 Публикация статьи в Nature Communications о чипах, спроектированных ИИ.
⚖️ Другая сторона
Искусственный интеллект OpenAI Sam Altman Mark Zuckerberg Nvidia prompt injection