Доктор Дэниел Гратарола о самоорганизации: «ИИ как живой организм»

Machine Learning Street Talk 22,4 тыс. 1 ч 55 мин 3 мин 29.04.2022
Главное

Магия сложности: Исследование клеточных автоматов и эмерджентности 0:29

Видео представляет собой глубокое погружение в концепции сильной и слабой эмерджентности, клеточных автоматов (КА) и их связи с искусственным интеллектом. Ведущий канала «Machine Learning Street Talk» беседует с доктором Даниэлем Гратаролой (Dr. Daniele Gratarola), исследователем из EPFL, об их работе с графовыми клеточными автоматами и попытках найти универсальные принципы самоорганизации, которые могли бы привести к созданию AGI (общего искусственного интеллекта).

🌌 Природа эмерджентности: от муравьев до рынков 1:06

Эмерджентность — явление, при котором простые локальные правила взаимодействия отдельных компонентов системы приводят к появлению сложного глобального поведения, которое нельзя предсказать, глядя только на части. По мнению ведущего, этот процесс проявляется на всех уровнях абстракции: от инженерных команд, где индивидуальные метрики превращаются в «инженерную культуру», до биологических популяций.

🧩 Клеточные автоматы как вычислительная модель 33:50

Клеточные автоматы — это вычислительные модели, где сетка ячеек меняет состояние на основе простых правил соседства. Хотя они были изобретены Джоном фон Нейманом в 1940-х годах, популярность они обрели благодаря «Игре жизни» Джона Конвея, где примитивные правила (выживание/смерть ячейки) порождают сложное, «подобное живому» поведение.

Гратаррола подчеркивает, что такие системы доказывают: для возникновения сложной структуры не нужен центральный координатор. Однако, как замечает ведущий, существует барьер «вычислительной неприводимости» (термин Стивена Вольфрама): предсказать результат поведения системы часто так же сложно, как просто дать ей отработать. Никаких «быстрых путей» к решению нет.

🧬 Морфогенез и нейронные клеточные автоматы 37:23

Основная часть дискуссии посвящена работе Александра Мод Винсефа (Alexander Mordvintsev) о «растущих нейронных клеточных автоматах» (Growing Neural Cellular Automata). Исследователи научили нейросеть (действующую как правило обновления для каждого пикселя) превращать случайный набор данных в упорядоченное изображение (например, ящерицу).

💡 Будущее ИИ и самоорганизация 40:10

Участники обсуждают вопрос: можно ли создать ИИ, который будет не «жестко запрограммированным» сверху вниз, а способным к самосборке? Гратарола считает, что именно поиск таких локальных алгоритмов — путь к созданию более гибких, устойчивых и адаптивных систем ИИ.

Тем не менее, оба собеседника соглашаются: текущая «одержимость» генерацией изображений и обучением на огромных датасетах может быть ограничена из-за отсутствия этой динамической, итеративной природы, свойственной биологическим организмам. В завершение Гратарола рекомендует следить за сообществами энтузиастов в соцсетях (таких как Twitter), утверждая, что именно там сейчас рождаются наиболее интересные экспериментальные подходы, опережающие академические публикации.

💬 Цитаты

«Мы как люди не имеем возможности взаимодействовать с атомами, хотя мы из них состоим.»

Даниэль Гратарола 1:04:18

«Предсказание результата вычислений системы часто так же сложно, как просто дать ей отработать.»

«Twitter — это новый архив.»

Даниэль Гратарола 1:51:18
👥 Спикеры
📚 Упомянутые книги
🔗 Упомянутые сайты и проекты
📖 Термины
Эмерджентность
Появление у системы новых свойств, не присущих ее отдельным элементам.
Клеточный автомат
Дискретная вычислительная модель из ячеек, меняющих состояние по локальным правилам.
Морфогенез
Процесс развития формы организма или структуры в ходе самоорганизации.
Графовая нейросеть (GNN)
Архитектура нейросетей для обработки данных, представленных в виде графов.
Вычислительная неприводимость
Состояние системы, когда невозможно предсказать её будущее состояние без полного прогона симуляции.
📊 Цифры
🗓 Хронология
  1. 1940-е Изобретение клеточных автоматов Джоном фон Нейманом.
  2. 1970 Джон Конвей создает «Игру жизни».
  3. 1999 Марк Бедо публикует работу о слабой эмерджентности.
  4. 2017 Даниэль Гратарола начинает свою работу над PhD по графовым нейросетям.
⚖️ Другая сторона
Искусственный интеллект Daniele Gratarola Cellular Automata Graph Neural Networks Emergence Morphogenesis