Клип на песню нейросетью
Клип на песню нейросетью собирается в Seaframe из трёх частей: песню сочиняет Композитор, сцены снимает Киностудия, а нода «Монтаж» в Воркфлоу склеивает их и кладёт трек. Одной кнопки «клип по песне» здесь нет — ниже честный порядок работы и то, о чём стоит знать заранее.
Что получите
- Песня под Ваш повод — Композитор в режиме «Песня» напишет текст с куплетами и припевом и исполнит его — от 30 секунд до 5 минут. Трек сохранится в Библиотеке.
- Один герой во всех сценах — Референс «Персонаж» держит лицо, причёску и одежду из сцены в сцену, а «Повторить установку» возвращает в пульт настройки удачного ролика.
- Стиль клипа — В карточке «Стиль» есть жанр «Клип» и вкладка «Монтаж» — от «Один кадр» до «Хаотичный»: модель режет сцену на планы с нужной частотой.
- Монтаж без списаний — Нода «Монтаж» склеивает ролики по порядку, кладёт песню, добавляет титр и призыв. Она работает без модели и бесплатно.
Как пользоваться
- Сочините песню. В Композиторе выберите «Песня», расскажите повод и настроение, проверьте текст и нажмите «Сочинить песню». Трек появится в Библиотеке, его можно скачать в MP3 или WAV.
- Разбейте песню на сцены. Вступление, куплет, припев — на каждую часть своя сцена. С Seedance 2.5 сцена длится от 4 до 30 секунд, поэтому песне в две минуты нужно несколько роликов.
- Снимите сцены. В Киностудии в режиме «Сам» опишите сцену, добавьте героя в «Референсы», в «Стиле» выберите жанр «Клип» и одинаковый «Формат» для всех сцен. «Снять» — и ролик ляжет в Библиотеку.
- Соберите схему в Воркфлоу. Ноды «Видео» — по одной на сцену, в порядке песни, нода «Звук» — Ваша песня из Библиотеки. Подключите их к «Монтажу» и выключите «Звук роликов».
- Запустите и скачайте. Нажмите «Запустить» — клип появится в ноде и в Библиотеке. «Монтаж» бесплатный, кредиты уходят только на песню и сцены.
Как «Монтаж» кладёт песню
- Песня обрезается по длине склеенного видео и в конце плавно затихает. Если сцены короче песни, она оборвётся раньше, поэтому сумма длин сцен должна совпасть с длиной трека.
- Если видео выйдет длиннее песни, трек начнётся заново — уберите или укоротите лишнюю сцену.
- Склейки идут по порядку подключения, точно в долю их никто не ставит. Нужен монтаж ровно в бит — скачайте сцены и трек и соберите их в своей монтажной программе.
- Формат клипа — 16:9, 9:16 или 1:1; «Как у первого» подбирает его по первой сцене. Титр в начале и призыв в конце — по желанию.
- Воркфлоу открывается на компьютере или планшете, на телефоне схему не собрать.
Честно о границах
- Губы героя под слова песни не попадут: сцены снимаются отдельно от трека. Для клипа подходят сцены без пения в кадр — история, настроение, движение, пейзаж.
- Трек не длиннее 30 секунд можно дать сцене референсом «Звук» с ролью «Музыка» — модель подстроит темп и настроение. Это умеет только Seedance 2.5, длиннее дорожку она не возьмёт.
- В Киностудию и Воркфлоу звук попадает только из Библиотеки. Свою готовую песню файлом проще свести со сценами в монтажной программе.
- Трек Композитора сочиняется заново, его можно ставить в свои ролики, рекламу и публикации. Не просите повторить чужую песню, мелодию или голос артиста — такой трек может нарушить чужие авторские права.
Частые вопросы
Можно ли сделать клип на песню нейросетью в один клик?
Нет: сцены снимаются в Киностудии, а песня кладётся на них нодой «Монтаж» в Воркфлоу. Зато неудачную сцену можно переснять отдельно, не трогая остальные.
Можно ли загрузить свою песню?
Звук в Киностудию и Воркфлоу попадает из Библиотеки — туда сохраняются треки Композитора. Готовую песню файлом удобнее свести со сценами в своей монтажной программе: ролики скачиваются из Библиотеки.
Будет ли герой петь под фонограмму?
Нет, движение губ со словами песни не совпадёт: модель снимает сцену отдельно от трека. Планируйте клип из сцен без пения в кадр.
Какой длины может быть клип?
Как песня: у Композитора — от 30 секунд до 5 минут. Клип склеивается из сцен по 4–30 секунд, поэтому длинной песне нужно больше сцен.
Можно ли попробовать бесплатно?
Да. Без действующей подписки каждый месяц после входа начисляется бесплатная квота кредитов — её можно тратить и здесь. Цена запуска видна на кнопке до старта, так что сразу понятно, хватит ли квоты.
Сколько стоит клип на песню?
Платят песня и сцены: цена трека видна на кнопке «Сочинить песню», цена сцены — на кнопке «Снять», до запуска. «Монтаж» в Воркфлоу бесплатный.