Концерт с участием искусственного интеллекта впервые в мире состоится 10 сентября в рамках культурной программы Восточного экономического форума (ВЭФ) во Владивостоке. Симфонию № 1, написанную музыкантом и композитором Петром Дрангой и получившую название «Космос», Большой симфонический оркестр исполнит вместе с нейросетью от Сбера на Приморской сцене Мариинского театра, сообщили в пресс-службе Сбера.
В компании рассказали, что симфония № 1 для искусственного интеллекта и Большого симфонического оркестра написана в классической структуре и состоит из 4 частей.
В 1 и 2 частях солирующую партию исполнят музыканты-виртуозы из Китая, будут звучать заранее записанные партии. В них нейросетевая модель от Сбера SymFormer будет управлять экспрессивностью исполнения непосредственно на сцене с помощью виртуального синтезатора.
В 3 и 4 частях зрители услышат настоящую импровизацию от SymFormer в режиме реального времени.
Петр Дранга предложил нейросети переосмыслить симфонию, изменяя и дополняя ее.
Так искусственный интеллект стал полноценным участником творческого процесса и соавтором композиции. Этот уникальный проект демонстрирует передовые технологии и разработки в сфере искусственного интеллекта, созданные в России, отмечают в Сбере.
Дополнительный элемент выступления — арт-объект, символизирующий нейромузыканта, — техно-матрешка. Центром музыкальной инсталляции станет SberBoom — мощная умная колонка с виртуальным ассистентом Салют. Она продемонстрирует гостям мероприятия, насколько технологии ИИ глубоко проникли в сферу творчества и искусства.
SymFormer — модель для генерации музыкальных произведений, основанная на принципе рассмотрения музыки в качестве нотного текста. Она разработана на основе архитектуры Performer.
Для обучения SymFormer использовалась платформа ML Space на базе суперкомпьютера Christofari и датасета из более чем 200 тыс. композиций разных стилей: от классики до современной электронной музыки и рока, уточнили в Сбере.