В эпоху стремительного развития искусственного интеллекта музыкальная индустрия оказалась на пороге тектонических сдвигов. Пока одни компании лишь осторожно присматриваются к новым технологиям, создатель инновационного устройства Stem Player Алекс Клейн уже прошел путь от журналистских расследований и конструкторов для детей до громкого (и скандального) сотрудничества с Канье Уэстом. В интервью для канала Eye on AI Клейн рассказывает, как генеративный ИИ превращает прослушивание музыки из пассивного процесса в творческий акт и почему будущее аудио — за «органическим» дизайном и аппаратными решениями, способными на лету разбирать любую песню на части.
🛠 От детских конструкторов до большой электроники 2:16
Путь Алекса Клейна в мир технологий начался необычно для основателя ИТ-компании. По его словам, он начинал как журналист, работая в таких изданиях, как Newsweek, The Daily Beast и New Republic, где освещал темы от движения Occupy Wall Street до налоговых деклараций Митта Ромни . Этот бэкграунд сформировал его подход к технологиям: Клейн утверждает, что вместо создания продуктов, которые «зомбируют» пользователя, он стремился создать экосистему, позволяющую видеть устройство изнутри и понимать принцип его работы .
Первым продуктом Клейна в 2013 году стал компьютерный комплект Kano — ярко-оранжевая коробка с цветными компонентами и пошаговой историей-инструкцией. По данным Клейна, компания продала более миллиона таких наборов по всему миру, заручившись поддержкой таких гигантов, как Microsoft, Disney и Warner Brothers .
Ключевые этапы развития Kano:
- Идея: Создать компьютер, который шестилетний ребенок сможет собрать сам.
- Технологическая база: Использование Raspberry Pi как основы для доступного пользовательского устройства .
- Философия: «Anyone can make» (Каждый может создавать) — концепция, согласно которой мир технологий не должен быть закрытым клубом для избранных .
Этот опыт «деконструкции» сложных систем позже лег в основу технологии Stem — возможности разделять музыкальный трек на отдельные составляющие .
🎹 Эра Stem Player и сотрудничество с Канье Уэстом 17:33
Встреча с Канье Уэстом на выставке CES стала поворотным моментом для компании Клейна. По его воспоминаниям, артист проявил искренний интерес к прозрачному планшету и простоте дизайна Kano . Это знакомство переросло в творческий союз: Клейн даже выступил соавтором текста в альбоме «Jesus Is King» .
Результатом сотрудничества стал Stem Player — компактное устройство, позволяющее пользователю в реальном времени управлять «стемами» (изолированными дорожками) песни: вокалом, барабанами, басом и инструментальной частью .
История партнерства с Уэстом была полна противоречий:
- Продуктивный хаос: Клейн описывает Уэста как человека, который делает всё сам и обладает огромной энергией, но испытывает трудности с доведением проектов до конца .
- Эксклюзивность: Альбом «Donda 2» был выпущен исключительно на Stem Player, что стало протестом артиста против стриминговых платформ .
- Разрыв: Клейн утверждает, что помимо публичных антисемитских высказываний Уэста, их разделило отношение к ИИ. По словам гостя, артист был категорически против использования ИИ в продукте, настаивая на том, что на устройстве должна быть только его музыка, в то время как Клейн видел будущее в генеративном ИИ, способном обрабатывать любую песню .
Несмотря на прекращение партнерства, Клейн сообщает, что первая партия из 100 000 устройств была полностью распродана, и проект принес чистую прибыль .
🧠 Технология за кадром: Как ИИ «слышит» музыку 23:43
Техническая суть Stem Player заключается в задаче, называемой Source Separation (разделение источников). Клейн объясняет, что хотя аналоговые методы фильтрации частот существуют десятилетиями, настоящий прорыв произошел в последние три года благодаря генеративному машинному обучению .
По мнению Клейна, человеческое ухо распознает голос по нюансам, которые невозможно выделить простым алгоритмом сортировки. Современный подход Stem использует:
- Гибридные модели трансформеров: Схожие по архитектуре с GPT, они обучаются на размеченных данных (вокал, барабаны и т.д.), чтобы «достраивать» и заполнять пробелы в выделенных дорожках .
- Синтез речи: Технологии, подобные Google WaveNet, помогают точнее реконструировать потерянные при разделении фрагменты аудио .
- Глубокое обучение: Модели детекции битов позволяют находить сильные доли, даже если темп песни меняется, что критично для создания качественных мэшапов .
🚀 Будущее: Stem 2 и «Магический» интерфейс 38:27
Алекс Клейн анонсировал выход Stem 2 в декабре текущего года . Новое устройство призвано решить главную проблему первой версии — необходимость физического подключения к компьютеру для загрузки музыки.
Особенности Stem 2, озвученные Клейном:
- Автономность: Устройство будет работать как Bluetooth-динамик, способный преобразовывать входящий аудиопоток в стемы в режиме реального времени .
- Органический дизайн: Вместо жесткого пластика компания стремится к созданию «мягких и податливых» устройств, которые ощущаются как продолжение тела .
- Новая модель дистрибуции: Клейн считает, что текущая экономика музыкальной индустрии «неисправна» (janky). Он надеется, что новые форматы прослушивания позволят артистам по-новому монетизировать контент, а слушателям — получать более глубокий опыт взаимодействия с музыкой .
В долгосрочной перспективе Клейн планирует выйти за рамки музыки. Он утверждает, что технологии разделения сигналов могут быть применены в видео (проект Stem Projector) и даже в медицине — например, для создания умных слуховых аппаратов, способных выделить один голос в шумной комнате [47:12, 48:21]. Однако в ближайшие три года фокус компании останется исключительно на аудио .
