Нейронная сеть которая делит песню на вокал и аккомпанемент

Тут чуваки из Deezer поделились нейронкой которая способна разделить одну песню на составляющие – отдельно вокал, отдельно инструменты.

Причем, одна песня может быть разделена на 5 составляющих: вокал, бас, ударные, пианино и все остальное.

Работает примерно так, вы даете ей на вход великие хиты:

Великий хит смотреть без регистрации и смс

Она выдает вам в ответ два файла:

Нейронная сеть которая делит песню на вокал и аккомпанемент

Я немного поигрался сам – конечно же, можно наконец-то самому спеть великий Rick Astley — Never Gonna Give You Up, но мне было интересно свести пару треков и что из этого выйдет.

За основу я взял настоящий великий хит прошлого века, Summertime от Ella Fitzgerald и Louis Armstrong:

Этот трек – источник для пения

В качестве музыкального аккомпанемента я взял кавер-версию этого трека от Andrea Motis Joan Chamorro Quintet & Scott Hamilton:

Этот трек – источник для музыки

В итоге у меня получилось 4 трека, немного пошаманив в аудасити, получился такой трек, который режет ухо (простите, я совсем не музыкант), но слушать можно:

Нейронка, мне кажется, в первую очередь может быть интересна настоящим музыкантам – если вам хочется поковырять ее самому, то вам нужно открыть этот коллаб:

И поменять ссылку на ваш mp3 файл, также не забудьте поменять названия mp3 файлов которые подаются на вход нейроночке.

 

Источник

Читайте также