Песня меняется под слушателя, правила остаются у автора: как устроен MultiVerse

Персональная версия песни может учитывать город слушателя и всё же сохранять замысел музыканта. Университет Карнеги — Меллона 22 октября рассказал о MultiVerse — исследовательском инструменте, в котором автор сам задаёт границы изменения текста.

Обычный запрос к генератору оставляет много решений модели. MultiVerse разделяет управление на замысел, структуру и контекст аудитории. Можно сохранить настроение, закрепить отдельные слова, определить рифму и число слогов, а затем выбрать, какие сведения о слушателе должны влиять на результат.

Например, в строке о поездке разрешается менять пункт назначения. Но подходящий город ещё не делает вариант пригодным: текст должен уложиться в заданные музыкальные ограничения. Система предлагает варианты и проверяет формальные условия, отклоняя неподходящие.

На рисунке из работы показан разбор для вымышленного слушателя: автор уточняет контекст вместо простого включения его имени в песню. Изображения: Alexander Wang, Chris Donahue, David Lindlbauer, MultiVerse, CC BY 4.0. Фрагменты без изменений.

В исследовании с десятью авторами песен подход сравнивали с работой через обычные запросы к языковой модели. Участники ценили явные ограничения, но отмечали компромисс между контролем, гибкостью и скоростью перебора вариантов.

Это прототип авторского инструмента. Исследование не подтверждает готовую интеграцию со стримингом или предпочтения массовой аудитории: восприятие слушателей оставлено для будущей работы. Для музыканта полезный принцип уже понятен: сначала решить, что в произведении должно сохраниться, затем разрешать персонализацию.