Suno расширяет свои возможности за пределы музыкальной сферы, представив новую функцию под названием «Visuals». Этот инструмент позволяет пользователям создавать искусственно сгенерированные видеоклипы и изображения для своих треков на веб-платформе, а также в приложениях для iOS и Android.
«Visuals» предлагает инструменты для создания видеороликов длиной до 15 секунд. Пользователи могут выбрать определенный фрагмент композиции и использовать начальное изображение для создания видеоряда. В качестве референса можно выбрать один из оригинальных персонажей Suno, загрузить собственную графику или сгенерировать картинку по текстовому описанию, выбрав соотношение сторон для горизонтального или вертикального формата.
Для генерации видеоклипов доступны настройки стартового или финального кадров, а также функция автоматической синхронизации губ вокалиста с видеорядом. Интерфейс включает таймлайн для монтажа роликов и добавления текста песни. Работа функции обеспечивается моделью H3 Move AI, созданной на базе технологии от MiniMax. Разработчики заявляют об оптимизации модели и внедрении фильтров для блокировки использования образов известных артистов, публичных лиц и защищенных авторским правом материалов.
Использование нового инструмента оплачивается с помощью отдельного баланса «Visuals credits», не связанных с обычными кредитами для генерации музыки, что потребует дополнительных расходов от пользователей. Запуск видеофункции следует за октябрьским добавлением опции речи, однако реакция сообщества оказалась неоднозначной: часть комментаторов под презентацией на YouTube выразила мнение, что разработчикам следовало бы сосредоточиться на улучшении качества генерации аудио.
Первоисточник: https://www.theverge.com/ai-artific...uno-visuals-ai-generated-video-images-feature