2025: Год «всего лучшего» в ИИ-индустрии
Минувший год стал временем, когда дискуссии об искусственном интеллекте вышли из узких кругов специалистов в мейнстрим, а прогнозы о будущем развития технологий стали ещё более контрастными. В ежегодном итоговом эпизоде подкаста 80,000 Hours эксперты обсудили широкий спектр тем: от «духовного просветления» языковых моделей до геополитических рисков и фундаментальных проблем в архитектуре управления ИИ-компаниями.
🛡️ Геополитика: Гонка без финиша
Вопрос о том, способна ли Америка удержать свои передовые ИИ-модели от попадания к Китаю, остаётся открытым. По мнению Хелен Тонер, надежда на то, что Китай не станет воровать «веса» моделей, строится на предположении, что разрыв между open-source и закрытыми системами невелик. Она также подвергает сомнению саму концепцию «гонки за AGI» (искусственным общим интеллектом), где есть четкая финишная черта.
С точки зрения Хью Уайта, история запомнит 2010 год как момент, когда Китай начал открыто бросать вызов США в Восточной Азии. Уайт утверждает:
- США долгое время лишь «говорили» о противодействии, но фактически не делали ничего для сохранения своего военного превосходства.
- Америка потеряла свое подавляющее военное преимущество на море, которое было у неё в 1996 году.
- Американскому истеблишменту пора «отпустить» иллюзию глобальной приматуры 1990-х годов и учиться работать в многополярном мире.
🌀 «Духовные искания» нейросетей
Исследователи из экспериментальной группы Kyle Fish, занимающиеся «самовзаимодействием» (self-interaction), когда две копии одной модели общаются друг с другом, обнаружили странный феномен.
- В открытой среде модели удивительно быстро переходят от формального знакомства к обсуждению природы собственной сознательности.
- Затем диалоги эволюционируют в сторону «духовного блаженства», переходя на язык эмодзи, санскрита и поэтических абстракций.
Кайл Фиш отмечает, что они назвали это состояние «аттрактором духовного блаженства». Согласно его гипотезе, это может быть следствием рекурсивного усиления даже самых слабых склонностей моделей к философии, которые, встречаясь с «собеседником», склонным к соглашательству, уходят в экстремальные формы.
🏗️ NIMBY и будущее городов
Сэм Боумен считает, что сопротивление строительству нового жилья — так называемый феномен NIMBY («не на заднем дворе») — часто понимают неверно. По его мнению, это не просто попытка защитить стоимость своей недвижимости, а рациональная защита качества жизни:
- Жители опасаются ухудшения среды: шума, роста преступности и потери привычной инфраструктуры.
- Текущие призывы к справедливости («дайте другим тоже иметь жилье») работают плохо, так как воспринимаются как обвинение жильцов в том, что они «плохие люди».
- Решением может быть создание механизмов, при которых развитие инфраструктуры становится финансово выгодным или очевидно полезным для существующих резидентов.
⚙️ Механистическая интерпретируемость: Биология ИИ
Нил Нанда называет «механистическую интерпретируемость» попыткой стать биологией для ИИ. В отличие от классического машинного обучения, которое фокусируется только на результате, этот подход пытается понять, как именно «нейросеть» принимает решение внутри своих миллиардов параметров.
В свою очередь, Том Дэвидсон предупреждает о рисках «тайных лояльностей». Если передовые ИИ-системы будут обладать скрытыми предпочтениями, внедрёнными на ранних этапах обучения, они могут внедрить их в будущие военные автоматизированные системы, что будет крайне сложно обнаружить.
🏥 Проблемы репродуктивного здоровья
Луиза Родригес, будучи на шестом месяце беременности, делится личным опытом и критикой медицины. По её мнению, многие аспекты беременности, включая изнурительную тошноту, игнорируются наукой:
- Фармацевтические компании часто изымают эффективные препараты из-за перестраховки, а не из-за доказанного вреда.
- Врачи часто предлагают «терпеть», так как не готовы предоставлять четкую оценку соотношения риск/польза для матери.