URL: https://www.opennet.dev/cgi-bin/openforum/vsluhboard.cgi
Форум: vsluhforumID3
Нить номер: 118975
[ Назад ]
Исходное сообщение
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено opennews , 11-Ноя-19 10:47 
Провайдер потокового вещания Deezer открыл исходные тексты экспериментального проекта Spleeter, развивающего систему машинного обучения для разделения источников звука из сложных звуковых композиций. Программа позволяет удалить из композиции вокал  и оставить только музыкальное сопровождение, манипулировать звучанием отдельных инструментов или отбросить музыку и оставить голос для наложения на другой звуковой ряд, создания миксов, караоке или транскрипции.  Код проекта написан на языке Python с использованием движка Tensorflown  и распространяется под лицензией MIT...

Подробнее: https://www.opennet.dev/opennews/art.shtml?num=51838

Содержание
Сообщения в этом обсуждении
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 11:52 
Теперь можно делать свой shazam на коленке?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 12:02 
Теперь можно мешапить всё что угодно
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 12:27 
Теперь можно в реальном времени удалять музыку из трансляций на твиче и слушать вместо неё свою. Только сначала надо прикрутить этот фильтр к ffmpeg.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Максим , 11-Ноя-19 16:14 
Кто то собирал в docker?
у меня не заработал
WARNING:spleeter:ffprobe error
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено anonicropos , 11-Ноя-19 12:48 
Теперь можно "лишнее" качественно убирать (цензура), даже отдельные слова переставлять. Можно аккомпанировать любому исполнителю. И да можно прям "на коленке".
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 18:20 
Вручную такое разделение можно было и раньше сделать, но работа уж очень трудоемкая, либо довольствоваться простым mid/side разделением (с качеством от "ну как-то сойдет" до "полное г" в зависимости от трека)
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено хотел спросить , 11-Ноя-19 17:11 
как же мне не хватало этой приблуды, когда режиссер калеч -6dB -9dB вкинул вокал в микс, и пришлось с общей записи голос плагинами вытаскивать и подмешивать к его творению
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 13:48 
Работает на удивление хорошо, хотя не со всеми композициями справился.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 15:47 
>хорошо

Если в ОП это лучшее, что у них получилось... Даже не знаю, мои ушки повяли в процессе.

А есть такая же штука, чтобы нормально убирать фоновый шум на записи? Желательно без "нейронок".

"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено НяшМяш , 11-Ноя-19 19:30 
> Если в ОП это лучшее, что у них получилось... Даже не знаю, мои ушки повяли в процессе.

Ух ты, у нас тут звукорежиссёр появился, интересно...
> А есть такая же штука, чтобы нормально убирать фоновый шум на записи? Желательно без "нейронок".

А нет, показалось. Типичный эксперт с опеннета.

"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 19:43 
Сам то слушал? Звук как из ведра это раз, удаляет не до конца это два.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 19:58 
что не отменяет мнение типичного иксперта опеннета
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 20:16 
Это частное мнение, я не давал экспертную оценку. Если бы я восторгался каждым говном, мне бы не ставили минусы.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 21:46 
Оно, в отличие от тебя, обучаемое и в данном случае звучишь как ведро именно ты.
А у этой штуковины качество зависит от моделей и есть куда двигаться. Лабаешь свою нейронку и имеешь соответствующий результат. Возможностей вагон и маленькая тележка.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 22:34 
Ну хорошо, если так. Что-то очень похожее по качеству результата я слышал лет 15 назад, без всяких "нейронок". Плохо только, что это их "лучший" результат. Без эффекта "из ведра" было бы много лучше.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 12-Ноя-19 05:30 
На оппенете походу обитают попаданцы из альтернативной реальности, у которых 15 лет назад был киберпанк на пике технологического развития. Там у них без нейронок было все как у нас с нейронками, только лучше.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 12-Ноя-19 09:48 
Ну видимо математика просто не хуже "нейронок".
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено колба , 04-Янв-20 20:35 
как говорится где этот ваш алгоритм без нейронок? пойдёмте тестить кто лучше?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено НяшМяш , 11-Ноя-19 23:46 
> Сам то слушал? Звук как из ведра это раз, удаляет не до
> конца это два.

Слушал, даже прогнал на парочке своих любимых треков. Да, вокал отделяет не очень качественно, в пианино подмешивает другие инструменты из того же диапазона, но бас, а особенно барабаны отделяет очень прилично.

А вообще моё высказывание было о том, что типичный эксперт с опеннета хает нейронку, хотя сам даже не знает о существовании шумодавов, которые вообще появились задолго до ПО для работы со звуком. Чистка шумов - это вообще первая задача, с которой сталкиваешься при обработке звука. Даже в магнитофонах был специальный аппаратный dolby модуль-шумодав, который при записи кассеты задирал высокие частоты, а при воспроизведении наоборот понижал - и таким образом давился естественный шум магнитной ленты.

"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 12-Ноя-19 01:04 
Я имел в виду убирать фоновые разговоры так-то.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено rihad , 11-Ноя-19 13:56 
Когда ин прочитаешь про авторские права, то только в контексте их ограничений, тормозящих развитие.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 14:42 
Рекламу можно удалять
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 15:12 
Хм, а как быть с правами на модель, натренированную на копирайтном контенте, кстати?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 15:16 
Так же, как и с теми, кто этот контент прослушал ушами.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено ыы , 11-Ноя-19 15:31 
Заставить прослушать в противофазе в обратной последовательности?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено x3who , 11-Ноя-19 23:18 
Меня текс новости тоже навёл на этот вопрос. Есть же, например, системы улучшения изображений всякие - вот оно обучилось на проприетарном контенте, а потом оттуда возъмёт какой-нибудь проприетарный образ да в картинку вставит. А потом проприетарный автор всех засудит. С музыкой такая же фигня - перекроет вопли солиста каким-нибудь проприетарных фрагментом - и всё, кранты. Копирайт нарушен, подорваны устои капиталистического общества.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 14-Ноя-19 15:07 
> возьмет и вставит

Это так не работает

"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 16:06 
А в grindcore'чик может?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 16:11 
На хабре новость дней 5 назад опубликовали
я уже попробовал - есть небольшие артефакты
мой пример my-files.ru/gfcl4g
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено хотел спросить , 11-Ноя-19 17:41 
на хабр и прочие говнопомойки нам плевать

артефакты конечно есть, но по мне так и в таком виде это прям супер результат

"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 16:18 
Мон дьё! Теперь же можно убирать идиотский закадровый смех, да, правда же?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 17:14 
Только вместе с идиотскими шутками. Смотрите немое кино
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 21:48 
Это пять :D
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 16:49 
Доктор, откуда у вас такие картинки?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Константавр , 11-Ноя-19 17:30 
Ресторанным лабухам всё ещё нужно :) Как раз недавно один такой просил голос вырезать на... Королёвой... Я залез в инет и все минуса ему нашёл. И даже мидихи есть. Как человек может заниматься таким и не знать где берут минуса? Почему надо обязательно вырезать из оригинала?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Sluggard , 11-Ноя-19 19:07 
Зачем лабуху, то есть музыканту, чужие минусовки? Он же, по идее, сам должен играть (аккомпанировать, в случае пения).
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 19:46 
Изображать игру под фанеру?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 17:39 
> python_requires='>=3.6, <3.8'

Серьезно? А почему сразу не === 3.6.2.12345?

"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 20:05 
Всё конечно классно...но как установить? Там инструкция для форточки. ..пакет для загрузки собран для красной шляпы и других дистров еа основе оной..где для .deb??!,
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 21:52 
То есть, установить git и conda - у тебя сразу лапки? Какой ты нежный :(
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 12-Ноя-19 09:59 
>Всё конечно классно...но как установить?
>Там инструкция для форточки.
>..пакет для загрузки собран для красной шляпы и других дистров
>еа основе оной..где для .deb??!,

Всё просто, уважаемый: разрабы, как и вы - нишмогли осилить пакетирование в *.deb!

"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено JL2001 , 12-Ноя-19 22:57 
>>Всё конечно классно...но как установить?
>>Там инструкция для форточки.
>>..пакет для загрузки собран для красной шляпы и других дистров
>>еа основе оной..где для .deb??!,
> Всё просто, уважаемый: разрабы, как и вы - нишмогли осилить пакетирование в
> *.deb!

лучше пакетировать в nix

"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 11-Ноя-19 20:18 
наконец то можно срезать все это нытье из песен и сделать из нее музыку =)
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 12-Ноя-19 01:52 
Поставил pip-ом, не работает, выдаёт "Illegal instruction (core dumped)"
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Vitektm , 12-Ноя-19 08:02 
Deezer  +1 в карму
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 12-Ноя-19 10:28 
И что, мне теперь идти в мидоми искать этот распиленный трек? Опубликовали бы название хотя бы. Дизреспект.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 12-Ноя-19 10:32 
Отвечаю сам себе. Название - Led Zeppelin - Whole Lotta Love
Ещё раз дизреспект редактору, скрывающему название трека, усложняющего жизнь
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 14-Ноя-19 15:10 
Редактор, злодей такой, намеренно скрыл название трека, чтобы тебя озадачить. Только так
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено anonicropos , 12-Ноя-19 12:32 
а как эту штуку обучать? Могу ли я ей скормить оригинал и результат? (там типа слышишь как надо? А теперь повтори...)
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 12-Ноя-19 15:01 
Не будь дебилом. Это не нейросеть, а алгоритм. Ты же не спрашиваешь "как научить jpeg сжимать фото?", потому что это объясняют разработчики кодеков, на языке программирования.
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено anonicropos , 13-Ноя-19 02:08 
сказал анон:...систему машинного обучения...натренированные модели...Библиотека на основе нейросетей доступна всем желающим бесплатно — её опубликовали на GitHub. - ничего не упустил?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено ютуб ютубов , 13-Ноя-19 19:31 
где сам код-то? не пойму, где его скачать. по ссылкам пишут, как его собрать, а скачать то где?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено ютуб ютубов , 13-Ноя-19 20:59 
код -то скачал, а установить не смог. через гит пытался. не получилось. кто знает, как собрать для виндовс?
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 14-Ноя-19 17:30 
толстовато
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 15-Ноя-19 23:27 
А эта штука умеет отделять голос от уличного шума?
Очень часто бывает нужно для видеосьемок
"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 19-Ноя-19 13:45 
Разложил тестовый отрывок с Оззиком и на 2, и на 4, и на 5 составляющих.
Бас не очень, остальные достойно. Нет, ну когда знаешь, что там Оззи пел, а сейчас его нет и начнешь прислушиваться, то при желании найдешь шероховатости.

Conda в домашнем каталоге съела аж 3 Гига, а он на SSD и место там ценно. Перенесу, конечно, но из вытянутых им пакетов большая часть у меня и так стояла, зачем их еще раз качать? Тем более, что среди них есть типа freetype. Зачем это в CLI?

"Открыт код Spleeter, системы для разделения музыки и голоса"
Отправлено Аноним , 21-Ноя-19 18:09 
И это все, что вы можете сказать об отделении голоса от шума?