Джефф Бек: почему современные языковые модели лишены настоящего понимания мира

Machine Learning Street Talk 27,4 тыс. 46 мин 3 мин 10.04.2025
Главное

Будущее ИИ: Почему нам нужен «физический» интеллект и чем опасны LLM 0:00

Исследователь ИИ и основатель Tufa Labs Джефф Бек (Jeff Beck) в беседе с каналом Machine Learning Street Talk поднимает фундаментальный вопрос о текущем тупике в развитии искусственного интеллекта. По мнению эксперта, современные языковые модели (LLM) — это лишь «богатые на статистику» системы предсказания следующего слова, лишённые реального понимания мира, которое невозможно обрести без прямого физического опыта. Бек настаивает на необходимости создания систем, которые не просто имитируют человеческую речь, а способны к автоматизации системного проектирования и логическому рассуждению.

🐱 Уроки из кошачьего мозга: почему репрезентация имеет значение 2:20

Бек приводит яркую аналогию из истории нейрофизиологии 1970-х годов, чтобы объяснить, как выбор модели восприятия влияет на интерпретацию данных. Учёные пытались понять, на что реагируют нейроны в зрительной коре кошки, показывая ей слайды с изображениями мышей и мисок с едой, но приборы молчали.

Ситуация изменилась случайно: проектор сломался, и слайд встал криво, проецируя на экран лишь белое и чёрное пятно под углом. В этот момент нейроны кошки начали активно реагировать. Урок, по мнению Бека, заключается в следующем:

🧠 Проблема «теории разума» и ловушка LLM 5:04

Джефф Бек скептически относится к заявлениям о том, что LLM обладают «теорией разума» (способностью понимать, что другие обладают знаниями, отличными от собственных). Он вспоминает свои тесты с ChatGPT: модель часто «проваливала» проверку, выдавая не ход мысли, а заученный ответ о самой задаче.

⚖️ Проблема согласования (Alignment) и «невозможная» задача 37:10

Одной из главных тем беседы стала сложность согласования ценностей ИИ с человеческими. Бек утверждает, что задача «вытащить» функцию вознаграждения (reward function) из человека математически невозможна без понимания его системы формирования убеждений.

По мнению исследователя:

  1. Неразделимость: В рамках теории обучения с подкреплением невозможно отделить убеждения от целей, наблюдая только за поведением (действиями).
  2. Лавирование: Когда люди спорят, они склонны упрощать: либо оппонент «глуп» (неправильные убеждения), либо «зл» (иные ценности).
  3. Путь к решению: Чтобы создать действительно «согласованный» ИИ, система должна не просто следовать инструкциям, а иметь дополнительный уровень, который моделирует убеждения пользователя, постоянно ведя с ним «диалог» для уточнения причин того или иного решения.

Бек выражает надежду, что ИИ станет инструментом, который делает людей умнее, а не «костылём», избавляющим от необходимости мыслить. Его ночной кошмар — будущее, в котором человечество превращается в пассивных «выбирателей функций вознаграждения», делегируя всё мышление алгоритмам.

💬 Цитаты

«Я буду считать, что языковая модель движется в сторону интеллекта, когда она сможет произвести что-то, чего не было в её наборе данных.»

Джефф Бек 24:10

«Осознанность — это субоптимальный способ рассуждения, когда правильный способ становится слишком сложным.»

Джефф Бек 18:17

«Если вы не знаете убеждений человека, вы не можете вывести его ценности.»

Джефф Бек 1:08
👥 Спикеры
📚 Упомянутые книги
🔗 Упомянутые сайты и проекты
📖 Термины
Байесовская гипотеза мозга
Концепция, согласно которой мозг постоянно обновляет свои прогнозы о мире на основе новой информации с помощью вероятностного вывода.
Markov Blanket
Граница в статистической системе, которая изолирует внутренние состояния от внешних, позволяя сегментировать данные.
Alignment
Проблема согласования целей и ценностей искусственного интеллекта с человеческими.
📊 Цифры
⚖️ Другая сторона
Искусственный интеллект Jeff Beck Tufa Labs LLM Bayesian brain hypothesis Alignment