Питер Восс: «LLM — это статистический тупик на пути к настоящему AGI»

Eye on AI 7,9 тыс. 1 ч 2 мин 5 мин 01.10.2023
Главное

Питер Восс, ветеран исследований в области искусственного общего интеллекта (AGI) и один из авторов самого термина AGI, утверждает, что до создания полноценного цифрового разума осталось всего несколько лет. В интервью для Eye on AI он объясняет, почему доминирующие сегодня большие языковые модели (LLM) являются тупиковой ветвью на пути к истинному интеллекту, и предлагает альтернативу, основанную на когнитивных архитектурах и графах знаний.

🧠 Путь от ERP-систем к когнитивистике 2:19

Питер Восс начал свою карьеру как инженер-электроник, но вскоре переключился на программное обеспечение, создав успешную ERP-систему . Его компания выросла из гаражного стартапа до штата в 400 человек и вышла на IPO. Однако именно тогда Восс осознал фундаментальную ограниченность софта: программы не обладали здравым смыслом и выходили из строя при любой непредвиденной ошибке программиста .

После выхода из бизнеса он посвятил пять лет изучению теории познания (эпистемологии), когнитивистики и психологии развития детей . Восс стремился понять:

В 2001 году он основал свою первую компанию в сфере ИИ, плодом работы которой стал проект SmartAction, внедривший «интеллектуальный мозг» в системы автоматизации телефонных звонков . Текущая компания Восса, AIGOO.ai, представляет собой второе поколение этой технологии, нацеленное на создание AGI человеческого уровня .

🛠 Архитектура «чата с мозгом» против статистического ИИ 5:25

По словам Питера Восса, ключевое различие между его подходом и современными LLM (такими как ChatGPT) заключается в использовании когнитивной архитектуры вместо статистических предсказаний .

Гость полагает, что успех статистического ИИ (Big Data и Big Compute) «высосал весь кислород» из индустрии, заставляя инвесторов и учёных игнорировать когнитивные подходы . Однако он проводит аналогию: нейросети тоже считались нерабочими на протяжении 30 лет, пока не наступил прорыв .

📊 Уровни персонализации и памяти 13:13

Система AIGOO логически разделена на три слоя, которые позволяют ей быть одновременно универсальной и глубоко личной :

  1. Ядро (Core Knowledge): Базовые навыки общения, понимание грамматики и фундаментальных связей (на уровне выпускника колледжа) .
  2. Корпоративный слой (Ontology): Специфические знания о продуктах компании, бизнес-правила и интеграция с API .
  3. Индивидуальный слой: Память о конкретном пользователе, его предпочтениях, родственниках и истории покупок .

Восс подчеркивает эффективность хранения данных: пожизненная история переписки с пользователем занимает всего несколько мегабайт, в то время как LLM требуют триллионы параметров .

🌍 Заземление и мультимодальность: взгляд на AGI 16:50

Обсуждая подход Яна Лекуна (архитектура JEPA), Восс соглашается с необходимостью «заземления» (grounding) интеллекта через чувства . По его мнению, для истинного AGI необходимо:

Восс критикует метод «пакетного обучения» (bulk training), на который OpenAI и Google тратят сотни миллионов долларов . По мнению исследователя, интеллект должен обладать способностью к «обучению с одного примера» (one-shot learning). Ребёнку достаточно один раз увидеть розового слона, чтобы узнать его в любом контексте, тогда как нейросети нужны тысячи размеченных изображений .

👤 Концепция «Персонального помощника в кубе» 22:54

Питер Восс продвигает идею «personal-personal-personal assistant», где слово «персональный» имеет три значения :

  1. Собственность: Пользователь владеет помощником, это не сервис мегакорпорации вроде Siri или Alexa .
  2. Гиперперсонализация: ИИ знает всю историю и предпочтения владельца .
  3. Приватность: Пользователь сам решает, какими данными делиться с банком, супругом или Amazon .

Восс видит в этом будущем не просто «цифрового двойника», а «экзокортекс» — расширение человеческого разума, которое берет на себя рутину и дает советы .

📉 Почему LLM — это тупик для AGI? 33:13

Несмотря на впечатляющие успехи ChatGPT, Восс считает архитектуру трансформеров (Transformer) непригодной для создания AGI . Его аргументы:

Восс отмечает ироничную ситуацию: Сэм Альтман (OpenAI) и Демис Хассабис (DeepMind) сами признают, что LLM не приведут к AGI, но продолжают вливать деньги в масштабирование существующих систем из-за рыночного давления (FOMO) . По мнению гостя, лидеры индустрии — в основном статистики и математики, которые смотрят на интеллект через призму обработки данных, а не когнитивных функций .

🥊 Заочный спор: Гёрцель, Легг и «оркестрация» 37:08

Питер Восс выражает несогласие с подходами других пионеров AGI :

💰 Экономика и сроки: AGI за три года? 45:51

Система AIGOO крайне эффективна в плане ресурсов. Один агент может работать на сервере с обычным CPU или даже на ноутбуке пятилетней давности . Стоимость обучения новой функции или навыка исчисляется пенни, а не миллионами долларов .

На вопрос о том, когда мы увидим AGI, Восс отвечает: «Это вопрос не времени, а денег» . По его расчетам:

В настоящее время компания Восса ориентирована на коммерческий сектор: колл-центры (где ИИ может заменить 50% персонала), университеты (в качестве ассистентов для студентов) и здравоохранение (коучи для диабетиков) .


💬 Цитаты

«Это не вопрос времени, это вопрос денег. С командой в 100 человек мы могли бы достичь AGI за три года.»

Питер Восс 47:54

«Статистический ИИ высосал весь кислород из воздуха. Если вы хотите получить финансирование или PhD, вы обязаны заниматься им.»

Питер Восс 09:12

«LLM не знают, чего они не знают. У них полностью отсутствует метакогниция.»

Питер Восс 45:24
👥 Спикеры
📚 Упомянутые книги
🔗 Упомянутые сайты и проекты
📖 Термины
Когнитивная архитектура
Теоретическая модель структуры человеческого разума, реализованная в виде программного обеспечения.
Граф знаний
Способ представления данных в виде сети узлов (объектов) и ребер (связей между ними).
Метакогниция
Способность системы отслеживать и анализировать собственные мыслительные процессы и уровень уверенности в знаниях.
One-shot learning
Способность модели машинного обучения делать верные выводы на основе всего одного или нескольких примеров данных.
📊 Цифры
🗓 Хронология
  1. 2001 Питер Восс основывает свою первую компанию в области ИИ после пяти лет исследований.
  2. 2023 Публикация white paper Восса о наиболее прямом пути к AGI.
  3. 2024 AIGOO.ai планирует выпуск следующего поколения технологии с поддержкой зрения.
⚖️ Другая сторона
Искусственный интеллект Питер Восс AGI когнитивная архитектура AIGOO.ai граф знаний