Марк Цукерберг и Дженсен Хуанг: от обучения моделей Llama до дизайна очков дополненной реальности

NVIDIA 3,9 млн 58 мин 4 мин 30.07.2024
Главное

Марк Цукерберг основал компанию, которая охватывает миллиарды людей и достигла капитализации более 1 триллиона долларов . На конференции Siggraph 2024 он обсудил с Дженсеном Хуангом переход от рекомендательных алгоритмов к генеративному интеллекту и открытым платформам.

🤖 Эволюция рекомендаций и генеративный контент 5:13

Алгоритмы ранжирования в Facebook и Instagram раньше работали только с постами друзей . Теперь системы выбирают контент из миллионов публикаций со всего мира . Марк Цукерберг прогнозирует, что в будущем большая часть контента будет создаваться или синтезироваться инструментами ИИ «на лету» под интересы пользователя .

Дженсен Хуанг назвал рекомендательные системы одними из крупнейших вычислительных комплексов в мире . Марк Цукерберг стремится к объединению всех типов контента в единую модель ИИ . Это позволит системе лучше распознавать слабые сигналы и закономерности в поведении пользователей .

Meta интегрирует функции генерации изображений напрямую в WhatsApp . Пользователи могут изменять текстовые описания и мгновенно видеть результат. По словам Марка Цукерберга, ИИ-ассистент Meta AI скоро перейдет от формата простого чат-бота к выполнению сложных намерений . Система сможет запускать вычислительные задачи, которые длятся недели или месяцы .

🎨 AI Studio: персональные агенты для творчества 12:08

Meta запустила инструменты AI Studio для массового использования . Компания хочет дать возможность каждому пользователю создавать собственных агентов . Это касается миллионов авторов контента и сотен миллионов малых предприятий .

Создатели контента смогут обучать цифровых двойников на своих материалах для взаимодействия с сообществом . Марк Цукерберг считает это творческим процессом, сравнимым с созданием произведения искусства . Агенты помогут авторам преодолеть ограничение в 24 часа в сутках для общения с аудиторией .

Пользователи уже используют Meta AI для ролевых игр в сложных социальных ситуациях . Сюда входят тренировки перед разговором о повышении зарплаты или обсуждение конфликтов с друзьями . Марк Цукерберг уверен, что мир станет интереснее при наличии разнообразия ИИ-агентов .

В будущем каждый бизнес получит своего ИИ-агента для работы с клиентами . Марк Цукерберг планирует объединить функции продаж и поддержки в одном интерфейсе . Весь накопленный институциональный опыт компании будет зафиксирован в такой модели .

🌐 Философия открытого исходного кода 23:24

Марк Цукерберг объяснил приверженность открытому коду историей инфраструктурных проектов Meta . Проект Open Compute Project (OCP) позволил компании сэкономить миллиарды долларов за счет стандартизации цепочек поставок . Дженсен Хуанг подтвердил, что дизайн OCP сделал продукты NVIDIA пригодными для любого дата-центра .

Марк Цукерберг выразил недовольство ограничениями закрытых мобильных платформ . Он считает, что Apple выиграла текущее поколение вычислений, установив жесткие правила для разработчиков . Глава Meta надеется, что в следующем поколении лидерство вернется к открытым экосистемам .

Meta планирует сделать Horizon OS открытой операционной системой для смешанной реальности . Компания намерена работать с различными производителями оборудования для создания разнообразных устройств. Марк Цукерберг хочет гарантировать себе возможность строить социальные сервисы без запретов со стороны владельцев платформ .

Выпуск модели Llama 3.1 активировал разработчиков во всех отраслях . По мнению Дженсена Хуанга, открытый код позволяет компаниям владеть своим «маховиком данных» и институциональными знаниями . Это критически важно для безопасности и контроля над технологиями внутри предприятий.

🏭 Инфраструктура и специализированные модели 32:05

NVIDIA создала сервис AI Foundry для помощи компаниям в разработке собственных моделей на базе Llama . Итогом работы становится NIM — микросервис логического вывода, который можно запустить на собственных серверах предприятия .

Дженсен Хуанг внедряет ИИ во все внутренние процессы NVIDIA:

NVIDIA использует самые крупные модели, такие как Llama 405B, для оптимизации работы инженеров . Дженсен Хуанг считает, что стоимость ИИ в 10 долларов в час оправдана, так как она кратно усиливает возможности дорогих специалистов . Для работы таких моделей критически важна производительность интерфейса NVLink .

👓 Будущее умных очков и робототехники 42:22

Марк Цукерберг разделяет платформы будущего на гарнитуры смешанной реальности и умные очки . Умные очки станут мобильной версией платформы, которую будут носить более миллиарда человек . Гарнитуры же останутся устройствами для глубокого погружения, аналогами рабочих станций .

Прорыв в области больших языковых моделей (LLM) произошел раньше, чем в технологиях голографических дисплеев . Это позволило выпустить востребованные умные очки Ray-Ban Meta без экранов . Марк Цукерберг прогнозирует, что очки с ИИ по цене около 300 долларов станут массовым продуктом .

Meta представила модель Segment Anything 2 (SAM 2) на конференции Siggraph . Она способна распознавать и отслеживать объекты на видео в реальном времени. Технология применяется для изучения коралловых рифов и ландшафтов . Дженсен Хуанг видит потенциал SAM 2 в складской логистике для автоматического распознавания происшествий .

🥩 Личные истории и завершение 39:12

Дженсен Хуанг рассказал о совместном приготовлении чизстейков дома . Он отметил склонность Марка Цукерберга к идеальной точности при нарезке помидоров . Марк Цукерберг признался, что работает над своим имиджем «иконы стиля», чтобы лучше продвигать носимые устройства .

В конце встречи руководители провели традиционный обмен куртками . Марк Цукерберг подарил Дженсену Хуангу черную кожаную куртку с подкладкой из овчины . Хуанг в ответ отдал свою новую куртку, купленную специально к Siggraph 2024 и прослужившую ему всего два часа .

💬 Цитаты

«В будущем у каждого бизнеса будет ИИ-агент, взаимодействующий с клиентами.»

Марк Цукерберг 16:47

«Я надеюсь, что в следующем поколении вычислительных платформ открытая экосистема снова победит.»

Марк Цукерберг 27:03

«Мы пошли другим путем: вместо создания всё более мелких устройств мы строим компьютеры размером со склад.»

Дженсен Хуанг 54:12
👥 Спикеры
🔗 Упомянутые сайты и проекты
📖 Термины
NIM
Оптимизированный микросервис NVIDIA для быстрого развертывания моделей ИИ.
NVLink
Высокоскоростная шина данных для соединения графических процессоров в кластеры.
Zero-shot
Способность модели ИИ выполнять задачу без предварительного обучения на конкретных примерах этой задачи.
Horizon OS
Операционная система Meta для устройств виртуальной и смешанной реальности.
📊 Цифры
🗓 Хронология
  1. 2018 Meta продемонстрировала первые наработки по отслеживанию рук для виртуальной реальности.
  2. 2023 Выпуск модели Llama 2, ставшей важным событием для индустрии открытого ИИ.
  3. Июль 2024 Релиз Llama 3.1 и презентация Segment Anything 2 на Siggraph.
⚖️ Другая сторона
Технологии и IT Nvidia Meta Llama 3.1 Ray-Ban Meta Siggraph