Генеративная музыка: как создать хит по собственному вкусу

ТехИнсайдерHi-Tech

Слова вместо нот

Создано ИИ

После того как мы наигрались с графическими нейросетями Midjourney, DALL-E 2 и Stable Diffusion и даже нарисовали себе при их помощи обложку и часть журнала, возник вопрос, когда появятся подобные музыкальные сервисы. Пишешь: «хочу что-то в стиле калифорнийского серф-рока, но чтобы на гитаре играл Джими Хендрикс, на барабанах – Джон Бонэм, а вокал был от Сэм Браун» – и тебе нейросеть генерит персональный хит. Первый же запрос в Google «text-to-music» выдал в поиске Mubert – проект с российскими корнями, о котором мы писали еще в 2019 году и который с тех пор стал одним из лидеров в мире генеративной музыки. И я отправился к сооснователю Mubert Павлу Згордану, который отвечает в компании за это направление.

В основе технологии генеративной музыки Mubert лежит огромная база семплов – небольших музыкальных партий размером от 1 до 64 тактов, из которых алгоритм, как из кирпичиков, строит музыкальную композицию. В 2019 году коллекция Mubert исчислялась сотнями тысяч семплов, сегодня счет идет на миллионы, и каждый месяц добавляются новые. Mubert покупает их через собственную биржу. «Сейчас мы платим около 50 центов за семпл, и музыканты, которые сотрудничают с нами, зарабатывают на этом в среднем по 500–600 долл. в месяц. Фрагменты необязательно должны сильно отличаться друг от друга – могут быть просто вариации». Собственно, семплы – единственное, что осталось от старого Mubert: все алгоритмы и движки были кардинально переработаны. Старый алгоритм на основе лайков/дизлайков считал так: «если вам понравилось это сочетание звуков, то послушайте теперь вот такое – оно понравилось кому-то с аналогичными предпочтениями». Сейчас результаты выбора прогоняются через нейросеть и преобразуются в некий вектор в многомерном пространстве. Mubert изучил множество данных по трекам в разных жанрах, и музыка стала четче совпадать с ожиданиями пользователей.

«А еще мы сделали драм-машину – она играет барабанные партии, которые уже научилась сама придумывать, – рассказывает Павел Згордан. – Когда запускается трек из присланных семплов, мы вырезаем из них небольшие кусочки, а драммашина создает новый ритм».

Раньше музыкант при загрузке семплов должен был их тегировать; сейчас этого делать не надо: нейросеть по спектральному анализу определяет, что за звук перед ней, какой играет инструмент и пр., и сама маркирует его. Еще внедрили систему автоматического сведения треков – выстраивание баланса громкости, чем обычно занимаются звукорежиссеры. А в финале – автоматический мастеринг, шлифовка трека эквалайзерами и компрессорами. Все это уже работает в генераторе музыки для создателей контента Mubert Render.

Mubert Render

Классное, кстати, приложение! Сколько раз мы в редакции сталкивались с проблемами подборки нужного музыкального трека для нашего видео. Чуть что не так с авторскими правами – и тот же YouTube блокирует ролик. Приходится обращаться к знакомым композиторам, а это лишние траты и времени, и денег.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

20 вещей, которые могут тебе пригодиться в постели 20 вещей, которые могут тебе пригодиться в постели

Объекты и явления, при помощи которых твой секс будет еще великолепнее

Maxim
«Серебряный воробей»: книга с рекомендациями от клуба Опры Уинфри «Серебряный воробей»: книга с рекомендациями от клуба Опры Уинфри

Отрывок из книги «Серебряный воробей» американской писательницы Тайари Джонс

Forbes
Тритий пошел Тритий пошел

Изотоп водорода может подарить нам батарейки, работающие годы без подзарядки

ТехИнсайдер
Вместо елки Вместо елки

7 растений к Новому году

Лиза
Последний пшик моды Последний пшик моды

Одежда из баллончика, распыляемая прямо на тело, больше не фантастика

ТехИнсайдер
Нормальная родня: как кино учит нас здоровым отношениям Нормальная родня: как кино учит нас здоровым отношениям

Как сценаристы и режиссеры по-новому показывают родственные связи

Forbes
Планетарная оборона Планетарная оборона

Рано или поздно Земля обязательно столкнется с крупным астероидом

ТехИнсайдер
Почему мы заводим животных вместо детей Почему мы заводим животных вместо детей

Как не поддаться чрезмерной любви к домашним животным

Psychologies
Все уровни беспилотности Все уровни беспилотности

Из пункта А в пункт Б выехал автомобиль — казалось бы, что может быть проще?

ТехИнсайдер
13 мифов о страшном сахаре: оказывается, не так страшен черт, как его малюют! 13 мифов о страшном сахаре: оказывается, не так страшен черт, как его малюют!

Каждый слышал пугалки про употребление сахара. Но так ли они правдивы?

ТехИнсайдер
«Изобретатели становятся героями грустных историй». Правила бизнеса Ларри Пейджа «Изобретатели становятся героями грустных историй». Правила бизнеса Ларри Пейджа

Сооснователь Google о философии компании и спорах со Стивом Джобсом

Forbes
От депрессии до пищевой аллергии От депрессии до пищевой аллергии

Почему болит голова после сна?

Лиза
Искусственный интеллект и нейроморфные вычисления: второе дыхание Искусственный интеллект и нейроморфные вычисления: второе дыхание

Микрочипы постепенно приближаются к человеческому мозгу

Наука
Что протекло в «Циолковском» Что протекло в «Циолковском»

Разбираемся в поломке российского корабля, пристыкованного к МКС

N+1
Миома и саркома матки: что нужно знать об этих заболеваниях каждой женщине? Миома и саркома матки: что нужно знать об этих заболеваниях каждой женщине?

Миома матки: симптомы заболевания, диагностика и факторы риска

Psychologies
Не только «Уэнсдей»: лучшие танцы в истории кино Не только «Уэнсдей»: лучшие танцы в истории кино

Какие танцы из истории кинематографа заставляли нас покрываться мурашкам?

Правила жизни
Принц цирка Принц цирка

Анар рассказал, почему он уверен, что должен жить на Голливудских холмах

Grazia
Cлова 2022 года: 11 главных понятий, которыми обогатился русский язык Cлова 2022 года: 11 главных понятий, которыми обогатился русский язык

Какими терминами пополнился наш словарь в 2022 году?

Maxim
Боже, прими короля. Почему футбол после смерти Пеле не будет прежним Боже, прими короля. Почему футбол после смерти Пеле не будет прежним

Разбираем феномен легендарного футболиста Пеле

Правила жизни
Freddie Mercury Freddie Mercury

«По правде говоря, я ненавижу рассказывать о себе»

ЖАРА Magazine
Почему дети плохо учатся Почему дети плохо учатся

Как родителям помочь своему ребенку полюбить тот или иной предмет

СНОБ
Отрывок из романа Дженнифер Сэйнт «Ариадна» Отрывок из романа Дженнифер Сэйнт «Ариадна»

Отрывок из страстного романа, рассказанного героинями греческих мифов

СНОБ
Отрывок из повести Майка Омера «Тринадцатая карта». Эксклюзивно на MAXIM Отрывок из повести Майка Омера «Тринадцатая карта». Эксклюзивно на MAXIM

Отрывок из нового произведение всемирно известного автора детективов Майка Омера

Maxim
Как быстро избавиться от мозолей на ногах: полное руководство Как быстро избавиться от мозолей на ногах: полное руководство

Как избавиться от мозолей на ногах и снова наслаждаться своей легкой походкой?

ТехИнсайдер
Кофе — спасение от диабета? Удивительные свойства напитка! Кофе — спасение от диабета? Удивительные свойства напитка!

Регулярное употребление кофе может оказаться полезным для женщин

ТехИнсайдер
Юрий Яковлев: последний романтик уходящей эпохи Юрий Яковлев: последний романтик уходящей эпохи

Красавец в костюме на шикарной иномарке

Караван историй
Анкилозавры сражались друг с другом также яростно, как с тираннозавром Анкилозавры сражались друг с другом также яростно, как с тираннозавром

Костяные наросты на боках анкилозавра были сломаны не в борьбе с хищником

ТехИнсайдер
Как уйти от абьюзера без последствий: 5 важных правил Как уйти от абьюзера без последствий: 5 важных правил

Как не стать заложником чужой неадекватности и абьюза?

Psychologies
Астрологи, экстрасенсы, целители: почему люди идут к ним сегодня? Астрологи, экстрасенсы, целители: почему люди идут к ним сегодня?

Почему «бытовая магия» популярна в наш век высоких технологий?

Psychologies
Время Большого Пса. Зимнее небо Время Большого Пса. Зимнее небо

Главная достопримечательность созвездия Большого Пса — это Сириус

Наука и жизнь
Открыть в приложении