Томас Диттерих: «Современный ИИ — это консервативная технология»

Eye on AI 3,2 тыс. 56 мин 3 мин 09.10.2024
Главное

Эволюция ИИ: От экспертных систем к нейросимволическому будущему 0:25

В интервью каналу Eye on AI профессор Томас Диттерих (Thomas Dietterich), один из пионеров машинного обучения, чья карьера началась еще в 1977 году, анализирует путь развития технологий ИИ — от ранних попыток кодирования человеческих знаний до современных моделей, основанных на глубоком обучении и архитектуре трансформеров. Главный тезис эксперта заключается в том, что, несмотря на впечатляющие успехи генеративного ИИ, поле машинного обучения сталкивается с фундаментальными проблемами, такими как неспособность систем работать с новизной и отсутствие теоретической базы для объяснения того, почему современные нейросети работают настолько эффективно.

История и эволюция методов обучения 0:37

Томас Диттерих выделяет несколько этапов в развитии искусственного интеллекта:

По словам профессора, ключевой особенностью глубокого обучения стала способность моделей самостоятельно «выучивать» внутренние представления данных, что значительно превзошло эффективность ручного проектирования признаков. Однако он отмечает, что современные методы «ленивы»: они хорошо работают лишь в рамках тех данных, на которых обучались, и часто не способны распознать объект, если ранее не видели ничего похожего.

Трансформеры и ограничения больших языковых моделей 14:11

Обсуждая роль современных моделей, Томас Диттерих отмечает неоднозначность их применения:

  1. Компьютерное зрение: Профессор скептически относится к доминированию трансформеров в распознавании объектов по отдельным кадрам, считая, что сверточные нейронные сети (CNN) часто эффективнее, так как они учитывают пространственную структуру и инвариантность к сдвигу.
  2. Работа с видео: Трансформеры показывают огромную силу при анализе видео, где механизмы внимания позволяют эффективно отслеживать сложные временные зависимости, недоступные для более простых моделей.
  3. Фундаментальные проблемы: Главным риском Диттерих называет «Rumsfeld problem» — проблему неизвестного. Модели являются консервативными, ориентированными на прошлое технологиями.

Путь к научной достоверности: Нейросимволические системы 28:33

Одной из наиболее перспективных областей Диттерих считает создание нейросимволических архитектур, где база знаний хранится отдельно от нейросети.

Безопасность и оценка неопределенности 48:42

Говоря о применении ИИ в критических областях, таких как медицина или беспилотные системы, Диттерих подчеркивает, что ни один статистический алгоритм не гарантирует стопроцентную надежность.

В завершение беседы Томас Диттерих выразил уверенность, что, несмотря на хайп, «суперинтеллект» не появится в ближайшее время, а перед исследователями стоит множество открытых и захватывающих задач, требующих глубокой научной работы, а не только инженерных экспериментов.

💬 Цитаты

«Машинное обучение, по сути, является консервативной технологией, ориентированной на прошлое.»

Томас Диттерих 06:32

«Deep learning методы «ленивы»: они учатся представлять только то, что их заставляют представлять.»

Томас Диттерих 11:17
👥 Спикеры
🔗 Упомянутые сайты и проекты
📖 Термины
Rumsfeld problem
Проблема «неизвестных неизвестных» — неспособность ИИ корректно реагировать на ситуации, которые отсутствовали в обучающих данных.
Символическая регрессия
Метод поиска математической формулы, которая лучше всего описывает данные, в отличие от поиска черного ящика в нейросетях.
Нейросимволические системы
Гибридные ИИ-системы, сочетающие нейросети (для обработки данных) и символическую логику (для хранения фактов и рассуждений).
Мультиинстансное обучение
Форма слабого обучения, где метка дается не для конкретного примера, а для набора примеров (мешков).
📊 Цифры
🗓 Хронология
  1. 1950-е Зарождение машинного обучения с работами Артура Сэмюэля.
  2. 1980 Первый семинар по машинному обучению в Университете Карнеги — Меллон.
  3. 1980-е Бум экспертных систем.
  4. 2011-2012 Возрождение глубокого обучения и успех на ImageNet.
⚖️ Другая сторона
Искусственный интеллект Thomas Dietterich Machine Learning Neural-Symbolic Symbolic Regression Eye on AI