Новости октября 2026
1) Мы представили множество новых моделей для выделения отдельных инструментов:
| 1) MVSep Pedal Steel (Демо) | 2) MVSep Райзеры (Risers) (Демо) | 3) MVSep Хлопки (Clap) (Демо) |
| 4) MVSep Ковбелл (Cowbell) (Демо) | 5) MVSep Вибрафон (Демо) | 6) MVSep Metal Bars (Демо) |
| 7) MVSep Rhodes (Демо) | 8) MVSep Свист (Whistle) (Демо) | 9) MVSep Клавинет (Демо) |
| 10) MVSep Меллотрон (Демо) |
Кроме того, в алгоритм MVSep Bowed Strings (strings, other) добавлены новые веса: BS Roformer by gilliaan (SDR strings: 4.69). Текущая схема разделения представлена ниже.
2) Новая модель для караоке в разделе MVSep Karaoke (lead/backing vocals): BS Roformer 124 bands by MVSep Team (SDR: 10.77). Сейчас это вторая модель по качеству в лидерборде. Из-за высоких вычислительных требований она пока доступна только платным пользователям.
Если вам нужно максимально возможное качество для караоке, попробуйте этот пресет (результаты в лидерборде).
3) Мы представили новую архитектуру на основе модифицированного BS Roformer: BS PolarFormer. В ней используется другой тип эмбеддингов, основанный на полярных координатах, что позволяет ей, как и другим MSS-моделям, работать с длинным контекстом (см. график ниже). Позже мы добавили версию BS PolarFormer (124 bands, SDR: 12.02). Также в ней появилась новая функция: генерация двух дополнительных стемов с повышенной полнотой (fullness). В будущем мы планируем добавить больше таких стемов.
Ссылка на модель | Описание | Демо 1 | Демо 2
Несколько пользователей просили добавить overlap=8. Это очень ресурсоёмко и даёт прирост SDR всего на 0.02–0.05, поэтому мы добавили его как премиум-опцию (за кредиты) в качестве эксперимента для первой версии BS PolarFormer. Для большинства пользователей overlap=2 вполне достаточно. Для версии 124 bands опция overlap=8 недоступна, а все метрики приведены для overlap=2.
4) Мы выпустили лучшую на данный момент по метрикам модель для выделения вокала: BS Roformer 124 bands. Она в несколько раз медленнее оригинальной BS Roformer (одной из самых популярных моделей на сайте), поэтому временно доступна только платным пользователям, чтобы серверы справлялись с нагрузкой. Мы планируем сделать её бесплатной позже, когда добавим больше серверов. Модель «из коробки» умеет выдавать несколько уровней полноты (fullness) для вокала и инструментала (выбирается в форме).
| Algorithm name | Multisong dataset | Synth dataset | ||
| SDR Vocals | SDR Instrumental | SDR Vocals | SDR Instrumental | |
| BS Roformer (ver. 2024.02) | 10.42 | 16.73 | 12.45 | 12.16 |
| BS Roformer (viperx edition) | 10.87 | 17.17 | 12.71 | 12.41 |
| BS Roformer (ver. 2024.04) | 11.24 | 17.55 | 13.47 | 13.17 |
| BS Roformer (ver. 2024.08) | 11.31 | 17.62 | 13.56 | 13.27 |
| unwa high instrum fullness | 10.94 | 17.25 | 13.23 | 12.94 |
| unwa BS Roformer HyperACE v2 instrum | 11.09 | 17.40 | 12.63 | 12.33 |
| unwa BS Roformer HyperACE v2 vocals | 11.39 | 17.70 | 12.86 | 12.56 |
| BS Roformer (ver. 2025.07) | 11.89 | 18.20 | 14.58 | 14.28 |
| BS Roformer 124 bands (ver. 2026.07) | 12.33 | 18.64 | --- | --- |
| BS Roformer 124 bands fullness duality (by becruily) | 12.25 | 18.47 | --- | --- |
Также в раздел BS Roformer (vocals, instrumental) добавлена модель от @becruily с высокой полнотой инструментала: becruily high instrum fullness 124 bands (SDR instrum: 18.47).
5) Добавлена модель Mega 53 Stems (раздел Experimental and Misc).
- Модель выдаёт только те инструменты, которые были обнаружены в композиции. Отсутствующие в треке инструменты в результат не попадают.
- Отдельные модели для каждого инструмента, как правило, дают лучший результат, чем эта мультимодель. Поэтому рекомендуем сначала определить набор стемов с её помощью, а затем извлекать их специализированными моделями.
- Для экономии места результаты сохраняются во всех форматах, кроме WAV (вместо WAV используется FLAC).
- Это улучшенная версия нашей модели, ранее выложенной в open source. Сравнительная таблица есть на странице описания алгоритма.
Демо | Описание | Ссылка на модель
6) Много обновлений в разделе Reverb Removal (noreverb):
- MVSep Team (2026.07, BSRoformer) — наша новая универсальная модель: убирает реверберацию с любого стема или вокала. Сейчас она показывает лучшие результаты на обоих наших валидационных датасетах. Демо | Ссылка на модель
- DeReverb stereo by anvuew (BSRoformer) — модель от @anvuew для очистки вокала. Демо | Описание | Оригинальная модель
- Reverb removal by aufr33 and jarredou (MDX23C) — тоже работает как универсальная модель для всех типов стемов. Оригинальная страница | Ссылка на модель
Мы также подготовили валидационный датасет для DeReverb-моделей на основе тестовой части MUSDB18-HQ (50 треков). Сначала все стемы были очищены от реверберации моделью FoxJoy, затем были сгенерированы 6 тестовых сценариев: реверберация только на вокале (в миксе только вокал), на вокале, на ударных, на басе, на «other» (в каждом случае смешано со всеми остальными стемами) и на нескольких стемах одновременно.
Validation dataset 80 tracks: reverb for all stems
| Model | sdr | bleedless | fullness | l1_freq |
|---|---|---|---|---|
| Reverb removal by FoxJoy (MDX-B) | --- | --- | --- | --- |
| Reverb removal by anvuew (BSRoformer) | 0.89 | 27.33 | 4.85 | 15.03 |
| DeReverb stereo by anvuew (BSRoformer) | 4.28 | 27.29 | 13.10 | 23.14 |
| Reverb removal by aufr33 and jarredou (MDX23C) | 4.81 | 23.17 | 18.65 | 24.92 |
| Reverb removal by anvuew (MelRoformer) | 1.86 | 28.93 | 6.62 | 17.17 |
| Reverb removal by anvuew v2 (MelRoformer) | 1.98 | 30.61 | 6.86 | 17.83 |
| Reverb removal by Sucial (MelRoformer) | 0.67 | 40.76 | 3.98 | 14.23 |
| Reverb removal by Sucial v2 (MelRoformer) | 0.73 | 35.88 | 4.28 | 14.35 |
| DeReverb room by anvuew (BSRoformer) | --- | --- | --- | --- |
| MVSep Team (BSRoformer) | 7.87 | 28.06 | 26.12 | 32.33 |
Validation dataset 27 tracks: reverb for vocals only
| Model | sdr | bleedless | fullness | l1_freq |
|---|---|---|---|---|
| Reverb removal by FoxJoy (MDX-B) | --- | --- | --- | --- |
| Reverb removal by anvuew (BSRoformer) | 6.67 | 27.68 | 13.25 | 32.32 |
| DeReverb stereo by anvuew (BSRoformer) | 8.80 | 32.84 | 16.50 | 37.48 |
| Reverb removal by aufr33 and jarredou (MDX23C) | 6.18 | 16.04 | 19.32 | 31.93 |
| Reverb removal by anvuew (MelRoformer) | 6.63 | 29.67 | 13.14 | 32.02 |
| Reverb removal by anvuew v2 (MelRoformer) | 8.20 | 29.94 | 15.91 | 36.13 |
| Reverb removal by Sucial (MelRoformer) | 4.88 | 31.56 | 11.13 | 27.90 |
| Reverb removal by Sucial v2 (MelRoformer) | 4.94 | 27.85 | 11.39 | 28.14 |
| DeReverb room by anvuew (BSRoformer) | --- | --- | --- | --- |
| MVSep Team (BSRoformer) | 9.81 | 29.23 | 18.56 | 40.33 |
7) Новый алгоритм DeEffect vocals by gilliaan. Модель восстанавливает чистый «сухой» ведущий вокал из обработанных записей: убирает реверберацию, задержку/эхо, дублирование вокала и протечки бэк-вокала, одновременно подавляя инструментал. Поддерживаются как стерео-, так и моно-эффекты. Модель оптимизирована для ведущего вокала, но может обрабатывать и бэк-вокал, если каналы предварительно разделены. Как выяснилось, она также неплохо убирает звуки толпы.
8) Новый алгоритм Clean Inverted Vocals (раздел Experimental and Misc). Обе модели в нём созданы для очистки вокала (акапеллы) от артефактов после инверсии фазы, когда официальный инструментал вычитается из оригинального трека. Стандартные модели для выделения вокала обычно не справляются с такими искажениями (особенно если исходники были сжаты, например, в MP3).
- bsroformer_cleaninvert (by gilliaan) — более новая модель (дообученная версия «Revive»). Убирает «пикселизированные» и размытые артефакты MP3-сжатия, треск и клиппинг. Автор рекомендует сначала обработать вокал моделью «big beta 5e», а затем очистить остатки этой моделью.
- Mel-Roformer invert-clean (by becruily) — более ранняя модель для похожей задачи. Отлично убирает щелчки, резкие пики и «упрямые» остатки инструментала, но меньше заботится о полноте вокала и может слегка замутнять звук в очень громких местах.
9) В раздел Phantom Centre extraction добавлены две модели от @gilliaan: Phantom Centre by gilliaan (BSRoformer) и Phantom Centre by gilliaan (mdx23c). Также с его помощью мы сделали новый лидерборд для выделения фантомного центра.
Демо | Описание | Ссылка на модель
10) Новая модель DrumSep от @jarredou на архитектуре BS Roformer разделяет ударные на 5 стемов: kick, snare, toms, hh и cymbals. Она доступна в разделе DrumSep (4-6 stems: kick, snare, cymbals, toms, ride, hh, crash) под названием «BS Roformer by jarredou (5 stems)». Названия моделей в этом разделе мы немного сократили.
11) Новые модели в существующих разделах:
- В DeNoise by aufr33 and gabox: модель gabox
- В MelBand Roformer (vocals, instrumental): gabox v10 flowers (SDR vocals: 10.67, SDR instrum: 16.97)
12) Новый алгоритм ADTOF Plus (Drums -> MIDI) для транскрипции ударных в MIDI. Для удобства есть встроенная предварительная обработка: сначала из полного микса выделяются ударные лучшей моделью MVSep, затем они разделяются на 6 частей моделью DrumSep (MelBand Roformer), после чего модель ADTOF генерирует MIDI-файл. Главное отличие от open-source аналога — более качественные модели для ударных и DrumSep.
Статья | Оригинальная модель | Версия на PyTorch
13) Новый алгоритм Upmixing by Jazzpear: восстанавливает объёмный звук 5.1 из стерео. Огромное спасибо @jazzpear за модель SCNet.
Демо | Ссылка на модель | Оригинальные веса
14) Новый алгоритм UniverSR для восстановления высоких частот (audio super resolution). Он основан на статье «UniverSR: Unified and Versatile Audio Super-Resolution via Vocoder-Free Flow Matching» (ICASSP 2026). Поддерживается вход 8/12/16/24 кГц и выход 48 кГц. Доступны модели: универсальная (для любого аудио), речевая и модель от Pitbull.
В режиме автоопределения полосы для файлов 44.1/48 кГц предполагается эффективная полоса 16 кГц (типично для старых записей и lossy-кодеков). Полосу можно задать вручную, но она не должна превышать реальную полосу записи, иначе настоящие высокие частоты будут заменены сгенерированными. По нашим тестам универсальная модель нормально работает только с полосой 8000, поэтому это значение выбрано по умолчанию. Речевая модель работает на любой частоте среза.
Демо | Ссылка на модель | Оригинальный репозиторий | Статья
Также мы исправили частую ошибку AudioSR «ValueError: Digital filter critical frequencies must be 0 < Wn < 1». Теперь все треки должны обрабатываться корректно.
15) На сайте появилась функция Пресеты. Она позволяет собирать сложные цепочки обработки аудио, а также сохранять и загружать собственные пресеты. Попробовать можно здесь. Делитесь своими лучшими пресетами: самые интересные мы добавим на сайт для всех пользователей. Например, один из пользователей предложил отличный пресет для инструментала.
16) Новая опция для аудио с частотой дискретизации, отличной от 44.1 кГц. Почти все модели теперь предлагают выбрать вариант обработки:
- 44.1 kHz (Stems: No Upsample) — входное аудио конвертируется в 44.1 кГц, стемы сохраняются в 44.1 кГц (прежнее поведение).
- 44.1 kHz (Stems: Match Initial Rate) — аудио понижается до 44.1 кГц для оптимальной работы модели, а стемы затем возвращаются к исходной частоте файла (удобно для проектов в 48 или 96 кГц).
- As Is (Keep High Frequencies) — аудио подаётся в модель с исходной частотой, чтобы сохранить верхние частоты. Модели оптимизированы под 44.1 кГц, поэтому качество разделения может быть непредсказуемым.
17) Мы готовим альфа-версию системы Арена для слепых тестов прослушивания. Она будет запущена в ближайшее время — как только система заработает, все, у кого есть аккаунт на MVSep, смогут принять участие и проголосовать. Система будет меняться с учётом ваших отзывов.
18) В Quality Checker добавлены новые лидерборды:
- Synth Vocals 2026 — исправленная версия Synth Leaderboard, из которой убраны все протечки. Результаты должны быть более реалистичными. Огромное спасибо @Bas Curtiz!
- MUSDB18 (Test) — тестовая часть одного из самых известных датасетов для разделения музыки (50 треков).
19) Мы подготовили бета-версию бота MVSep для Discord. Бота нужно сначала добавить на сервер. Файлы лучше отправлять ему в личные сообщения: бот сам спросит обо всём остальном и выполнит разделение согласно вашему выбору.
20) Текущую схему Ensemble All-in можно найти на картинке ниже:
21) Много обновлений и улучшений приожений для iOS и Android: 
