Как запустить ИИ в продакшен: уроки BlackRock по созданию безопасных агентов и RAG-систем

DeepLearning.AI 740 26 мин 4 мин 02.12.2025
Главное

Внедрение искусственного интеллекта в финансовый сектор перестало быть вопросом будущего и превратилось в повседневную необходимость для выживания на рынке. На конференции AI Dev 25 эксперты из BlackRockАдитья Дейв (Aditya Dave) и Джон Пепино (John Pepino) — представили комплексный подход к выводу ИИ-решений из стадии прототипов в промышленную эксплуатацию, акцентируя внимание на безопасности, регуляторных нормах и оптимизации RAG-систем.

🏛️ Финансовый ИИ на перепутье: от эффективности к доверию 0:21

Финансовая индустрия сегодня находится в точке перегиба . По мнению Адитьи Дейва, банки, страховщики и управляющие активами активно внедряют разговорные интерфейсы и инструменты моделирования не только ради моды, но и для радикального повышения эффективности.

Ключевые преимущества внедрения ИИ, которые выделяют спикеры:

Однако Адитья Дейв подчеркивает, что в финансах технологии неразрывно связаны с рисками. Регуляторные требования и надежное управление (governance) остаются «неподлежащими обсуждению» (non-negotiable) элементами любого проекта .

⚠️ Уроки прошлого и регуляторный ландшафт 2:07

По мере перехода ИИ от прототипов к продакшену внимание регуляторов усиливается . Адитья Дейв приводит исторический пример для иллюстрации рисков: в 2012 году JPMorgan Chase понес убытки в размере более $2 млрд из-за ошибки в модели Value at Risk (VaR) . Модель занижала риски, подавляя волатильность, что привело к катастрофическим решениям.

Этот кейс, по мнению спикера, доказывает обязательность управления рисками моделей (Model Risk Management). В качестве фундаментальных принципов BlackRock ориентируется на руководства, такие как SR 11-7, которые задают стандарты прозрачности и подотчетности для ИИ и машинного обучения в финансах .

Четыре столпа стратегии BlackRock в области ИИ-рисков:

  1. Целостность и производительность моделей.
  2. Управление и соблюдение нормативных требований.
  3. Риск-менеджмент.
  4. Безопасность и конфиденциальность (роль фидуциария перед клиентами) .

🤖 Архитектура ИИ-агентов в BlackRock 5:11

Джон Пепино представил концепцию ИИ-агентов, которые должны раскрыть «коллективный разум организации» . Видение BlackRock заключается в том, чтобы превратить цифровой опыт взаимодействия с клиентами в осмысленный диалог.

Для достижения этой цели агент должен обладать специфическими качествами:

Разработка таких агентов в компании проходит три фазы:

  1. Сборка на доверии: использование только внутреннего контента BlackRock и авторизация пользователей .
  2. Тестирование и валидация: многоуровневая проверка, включая пилотные группы, внутреннее согласование, редтиминг (для поиска уязвимостей и обхода ограничений) и юридическую оценку .
  3. Развертывание: постепенный запуск на подмножествах пользователей с автоматизированным мониторингом всех диалогов на соответствие комплаенсу .

🛡️ Обеспечение безопасности в реальном времени 8:58

Архитектура системы BlackRock построена так, чтобы фильтровать чувствительные темы и предотвращать галлюцинации ИИ. Джон Пепино описывает «оркестратор», который анализирует контекст пользователя и выбирает наиболее безопасный путь решения задачи .

Интересным техническим решением является использование параллельной модерации . Для минимизации задержек (latency) проверки на наличие персональных данных (PII), токсичности или попыток джейлбрейка запускаются одновременно. Если запрос попадает в категорию «жесткой блокировки» (hard block), ответ прерывается немедленно. В случае «мягкой блокировки» (soft block) система пытается направить пользователя на более безопасный сценарий .

Все этапы работы системы — от генерации эмбеддингов до задержки векторного поиска и расхода токенов — подлежат детальному мониторингу (observability) .

🛠️ Оптимизация RAG-систем: библиотека как стандарт 13:48

Адитья Дейв отмечает, что одной из главных проблем является создание разрозненных RAG-решений (Retrieval-Augmented Generation) разными командами внутри одной компании . Чтобы избежать хаоса, BlackRock разработал внутреннюю библиотеку для настройки систем.

Основные вызовы при масштабировании RAG:

BlackRock предлагает относиться к RAG-системам как к традиционным ML-моделям: фитировать (fit), оптимизировать и только затем встраивать в агентские системы . Библиотека поддерживает автоматизированную генерацию пар «вопрос-ответ» на основе сырых документов, что позволяет проводить системную оптимизацию промптов вместо интуитивных догадок .

❓ Вопросы и уточнения 20:30

В ходе сессии вопросов эксперты уточнили несколько важных технических деталей:

Спикеры подытожили: будущее финансового ИИ принадлежит тем, кто сможет совместить инновации с жесткой дисциплиной доверия и комплаенса .

💬 Цитаты

«ИИ в финансах — это не только про технологии. Это про трансформацию клиентского опыта, операционную устойчивость и конкурентные преимущества.»

Адитья Дейв (Aditya Dave) 01:40

«Одной утечки конфиденциальных данных или неуместного ответа достаточно, чтобы доверие клиента испарилось.»

Джон Пепино (John Pepino) 11:21
👥 Спикеры
🔗 Упомянутые сайты и проекты
📖 Термины
RAG (Retrieval-Augmented Generation)
Метод, при котором нейросеть берет данные из внешних проверенных источников перед генерацией ответа.
Чанкинг (Chunking)
Процесс разделения длинных текстов на фрагменты оптимального размера для эффективного поиска в базе данных.
Редтиминг (Red Teaming)
Процесс имитации атак на ИИ-систему для поиска способов заставить ее выдать запрещенную информацию.
Фидуциарная ответственность
Обязанность компании действовать исключительно в финансовых интересах своих клиентов.
📊 Цифры
🗓 Хронология
  1. 2012 Крупный торговый убыток JPMorgan Chase, ставший хрестоматийным примером рисков моделирования в финансах.
  2. 2025 Проведение конференции AI Dev 25, где BlackRock представили свои наработки по финансовому ИИ.
⚖️ Другая сторона
Экономика и финансы BlackRock RAG ИИ в финансах Aditya Dave John Pepino