Профессор Крис Саммерфилд о природе интеллекта, ИИ и «горьких уроках»

Machine Learning Street Talk 23,7 тыс. 1 ч 28 мин 3 мин 22.02.2023
Главное

Эволюция интеллекта: от биологических нейронов к кремниевым архитектурам 🧠 0:00

Профессор когнитивной нейронауки Оксфордского университета и исследователь DeepMind Крис Саммерфилд в беседе с каналом Machine Learning Street Talk обсуждает фундаментальные вопросы искусственного интеллекта (ИИ) через призму человеческого мозга. Основной тезис Саммерфилда заключается в необходимости переосмысления того, что мы понимаем под «интеллектом», и в поиске новых способов его измерения, выходящих за рамки узких тестов.

Проблема определения общего интеллекта 📏 7:25

Саммерфилд отмечает, что, несмотря на десятилетия исследований, общепринятого определения общего интеллекта до сих пор не существует. Современные попытки измерить интеллект в ИИ часто опираются на антропоцентричные метрики, которые глубоко укоренены в западной академической традиции.

«Швейцарский сыр» в логике ИИ 🧀 15:38

Одной из главных проблем современных нейросетей является отсутствие устойчивости (робастности) при решении широкого спектра задач. Саммерфилд приводит пример системы AlphaGo, которая, несмотря на сверхчеловеческие способности в игре го, была склонна к «бредовым состояниям» (delusions) — внезапным провалам в логике, которые могли длиться десятки ходов.

Битва подходов: «Аккуратные» против «Небрежных» ⚔️ 23:35

Саммерфилд классифицирует исследователей ИИ согласно исторической дихотомии Роджера Шенка:

  1. «Аккуратные» (Neats): Сторонники поиска чистых вычислительных принципов, которые стремятся исключить «грязные» данные о человеческом мозге, полагаясь на математическую строгость.
  2. «Небрежные» (Scruffies): Сторонники эмпирического подхода, которые «на ходу» дорабатывают системы для решения гетерогенных задач, признавая сложность мира.

Саммерфилд причисляет себя к «небрежным», полагая, что понимание биологии и контекста крайне важно для создания полезных систем. Он критикует «Горький урок» Рича Саттона, который призывает отказаться от человеческих интуиций в пользу наращивания вычислительных мощностей. Хотя Саттон прав относительно важности масштабирования, Саммерфилд подчеркивает, что успех таких моделей, как ChatGPT, обусловлен именно человеческим обучением с подкреплением (RLHF), что делает их полезными для общества.

Будущее: понимание или правдоподобие? 🤖 31:49

Дискуссия затрагивает вопрос: обладает ли ИИ «пониманием» мира или просто генерирует правдоподобные ответы? Саммерфилд аргументирует, что понимание связано с наличием ментальной модели, позволяющей делать сложные выводы и прогнозы.

В заключение профессор Саммерфилд подчеркивает: для создания действительно интеллектуальных систем мы должны перейти от создания инструментов, решающих узкие задачи, к агентам, способным «мечтать» о задачах и ставить цели самостоятельно.

💬 Цитаты

«Творчество — это способность генерировать вещи, которые новы, но правдоподобны и интересны.»

Крис Саммерфилд 39:03

«Когда мера становится целью, она перестает быть хорошей мерой.»

Крис Саммерфилд 9:14
👥 Спикеры
📚 Упомянутые книги
🔗 Упомянутые сайты и проекты
📖 Термины
G-фактор
Гипотетический единый фактор, лежащий в основе всех интеллектуальных способностей человека.
RLHF
Обучение с подкреплением на основе отзывов людей, используемое для настройки поведения языковых моделей.
Закон Гудхарта
Принцип: если метрика становится целью, она перестает быть хорошей метрикой.
Систематичность
Способность системы логически выводить новые смыслы из комбинации известных элементов.
Небрежные (Scruffies)
Подход в ИИ, делающий упор на прагматичное решение реальных, часто неупорядоченных задач.
📊 Цифры
🗓 Хронология
  1. 1904 Чарльз Спирмен предложил G-фактор интеллекта.
  2. 1960-е Формирование лагерей исследователей ИИ: «аккуратные» и «небрежные».
  3. 2007 Шейн Легг предложил определение интеллекта через способность достигать целей.
  4. 2016 Матч AlphaGo против Ли Седоля.
⚖️ Другая сторона
Искусственный интеллект Chris Summerfield DeepMind Artificial General Intelligence Machine Learning Street Talk неробиология