Липсинк-нейросеть: фото заговорит или запоёт под вашу запись
Используйте нейросеть для липсинка, чтобы оживить портрет под свою речь или песню. Прослушайте 4–15 секунд, выберите 768P или 2K и пропорции кадра, затем посмотрите результат и скачайте MP4. Войдите с балансом не менее 20 доступных кредитов; подарки и ежедневные награды тоже подходят.
Портрет
Одно чёткое лицо · JPG, PNG или WebP · до 30 МБ · не менее 256 × 256
Голос или песня
Выберите 4–15 секунд с отчётливой речью или пением.
Загрузка…
Посмотрите примеры с речью, подкастами, объяснением урока и пением.
Ведущая подкаста
Урок в классе
Исполнение песни
Как оживить портрет под речь или песню
01
Начните с фразы, которую хочется показать
Сначала послушайте запись, а затем решите, что должен выразить человек на фото. Представление, поздравление и строка припева требуют разной подачи даже с одним портретом. Для говорящего фото выберите законченную мысль с понятным началом и концом. Для пения удобнее фрагмент, где легко следить за основной вокальной партией, а не длинное инструментальное вступление. Подумайте, что важнее зрителю: смысл слов, мелодия или реакция лица. Аудио предоставляете вы сами; эта страница не сочиняет исходную песню и не пишет речь вместо вас. Подготовьте материал, который действительно хотите услышать в короткой сцене.
Говорящий портрет может представить проект, передать поздравление или объяснить короткую идею. Поющий портрет может исполнить узнаваемую строку вашей собственной песни. Выберите выражение лица под характер звука и начните с законченной фразы. В готовом MP4 используется выбранный отрывок, поэтому слушайте его, пока продумываете подачу.
02
Подготовьте чёткий портрет с хорошо видимым ртом
Выбирайте одного человека с хорошо различимым лицом и видимыми губами. Фронтальный или немного повёрнутый ракурс обычно удобнее для проверки, чем рот за волосами, рукой или микрофоном. Посмотрите, не скрывают ли тени контур губ и не слишком ли мало места занимает лицо. Больший размер выходного видео не гарантирует исправления размытого оригинала. Для группового снимка сначала подготовьте изображение нужного человека: здесь нет переключателя говорящего между несколькими лицами. Оставьте пространство вокруг головы, чтобы при выборе вертикального или горизонтального кадра не терять важную часть исходной композиции.
Можно загрузить JPG, PNG или WebP размером до 30 MB. Сейчас сервер требует минимум 256 пикселей по каждой стороне и отклоняет изображения более 32 миллионов пикселей. Также можно выбрать доступный портрет персонажа; сохранённые изображения остаются связаны с правами доступа аккаунта. Проверьте миниатюру перед отправкой, особенно если рядом несколько похожих файлов. Фото вписывается в выбранный формат, поэтому при другой пропорции могут остаться поля. Изменение соотношения сторон не дорисовывает автоматически фон и не создаёт окружение для слишком тесного кадрирования. Планируйте исходник под место, где собираетесь показать результат.
03
Сначала проверьте, что голос можно разобрать
Поддерживаются MP3, WAV, M4A, AAC, OGG и FLAC, а также выбор музыки из библиотеки вашего аккаунта. Локальный файл может быть до 30 MB. Содержимое должно декодироваться: правильное расширение не делает повреждённую запись пригодной. Включите воспроизведение в редакторе фрагмента и убедитесь, что выбрана нужная версия. Если браузер не проигрывает конкретную кодировку, сначала подготовьте вариант, который сможете прослушать. Не выбирайте отрывок только по названию и общей длительности: похожий файл может оказаться инструментальной версией без ожидаемых слов. Проверка звука нужна до того, как вы начнёте оценивать выражение лица.
Выберите фрагмент с одной разборчивой основной партией. Если аккомпанемент скрывает слова, сначала выделите вокал нашим инструментом и загрузите вокальную дорожку сюда. Сохраните первый согласный, окончание фразы и естественное дыхание. Прослушайте подготовленный отрывок, прежде чем описывать движения лица.
Сначала выделить чистый вокал нашим инструментом04
Прослушайте начало и конец выбранных 4–15 секунд
Один запрос использует целую длительность от 4 до 15 секунд. Начало можно выставить между целыми секундами, чтобы включить первую согласную, а не отрезать её. Найдите место на звуковой волне и прослушайте весь диапазон. Хорошее начало не спасает слишком ранний конец: проверьте последнее слово и протяжённую ноту. Длинную запись можно загрузить и выбрать её часть, но один запрос не превращает всю песню в видео. Диапазон должен помещаться в фактическую длительность файла. Если конец выходит за её пределы, задайте более раннюю точку старта или сократите отрывок перед отправкой.
Начало и длительность определяют передаваемый звук и фрагмент фонограммы готового ролика. Для прослушивания и расчёта нет двух независимых отрывков. Короткая завершённая фраза часто удобнее для первого сравнения, чем несколько тем подряд. Оставляйте те же слова, когда меняете фото или описание исполнения. Запишите точку старта и число секунд, чтобы позднее не спутать другую строку с влиянием нового изображения. В припеве важно услышать и вступление голоса, и окончание последнего звука, не только середину мелодии. Так вы отделите проблему обрезки от проблемы движения, которое хотите проверить.
05
Выберите качество и кадр для будущего показа
Доступны 768P и 2K и пять пропорций: 9:16, 16:9, 1:1, 4:3 и 3:4. Начальные настройки — 768P и вертикальный кадр 9:16. Вертикальный формат выделяет лицо, а широкий оставляет больше места вокруг. Посмотрите на фото в предпросмотре и выберите композицию для предполагаемого места показа.
Каждая генерация стоит 20 кредитов в 768P и 2K для любого поддерживаемого отрывка длиной 4–15 секунд. Качество и длина определяют настройки видео, а цена за запрос остаётся одинаковой. Рабочая панель сначала проверяет доступный баланс и сразу сообщает о нехватке кредитов. Перед загрузкой файлов баланс обновляется, а сервер снова проверяет его при списании. Используйте один и тот же звук для сравнения портретов или указаний и планируйте следующие попытки с учётом оставшегося баланса.
06
Опишите подачу и смотрите результат со звуком
Необязательное описание исполнения допускает до 1 200 символов. Задайте несколько ясных приоритетов: спокойную мимику, лёгкие движения головы или неподвижную камеру. Тихая речь и энергичный припев требуют разной подачи. Сравнивайте попытки с одним и тем же аудиофрагментом, чтобы оценить каждое изменение.
Смотрите результат со звуком. Проверьте первое слово, быстрые согласные, длинные гласные и окончание, затем обратите внимание на глаза, зубы и контур лица. В следующей попытке меняйте только один элемент: портрет, фрагмент или описание. Скачайте MP4 после просмотра всего исполнения.
07
Проверьте доступ, сохраните MP4 и разрешения на материалы
Войдите и убедитесь, что доступны как минимум 20 кредитов. Подходят подарки за регистрацию, ежедневные награды, кредиты подписки и купленные кредиты. Все аккаунты, включая администраторов, платят 20 кредитов за запрос. Подготовьте фото, прослушайте звук и проверьте кадр и отрывок перед отправкой. Сохраните MP4 вместе с исходными файлами. При явном отказе или подтверждённом сбое кредиты возвращаются; один и тот же запрос не оплачивается дважды.
Используйте свои фотографии и аудио либо материалы с разрешением на публикацию. Для узнаваемого человека уточните согласие на задуманное исполнение, для песни — права на нужное использование. Сохраняйте исходники и разрешения вместе с роликом и следуйте правилам площадки о маркировке сгенерированных выступлений.
Чтобы заранее подготовить часть записи, можно обрезать звук аудиоредактором.
Для новой музыкальной идеи можно попробовать генератор музыки с ИИ.
Вопросы о говорящем или поющем фото
Как сделать говорящее или поющее фото?
Выберите портрет или доступного персонажа, добавьте звук и прослушайте 4–15 секунд. Задайте качество, пропорцию и необязательную подачу. Проверьте оценку и право доступа, затем войдите для генерации.
Какие изображения и аудиофайлы поддерживаются?
JPG, PNG и WebP для фото; MP3, WAV, M4A, AAC, OGG и FLAC для звука. Каждый файл может быть до 30 MB и должен пройти проверку содержимого. Убедитесь, что аудио воспроизводится.
Можно выбрать часть полной песни?
Да, если файл укладывается в ограничение и декодируется. Выберите 4–15 секунд и проверьте обе границы. Один запрос не создаёт видео всей песни.
Как выбирать качество и соотношение сторон?
Выберите 768P или 2K и одну из пяти пропорций для нужного показа. Проверьте композицию и новую оценку. Более высокое разрешение не гарантирует лучшую синхронизацию губ.
Нужен ли вход и как считаются кредиты?
Войдите с балансом не менее 20 доступных кредитов. Генерация стоит 20 кредитов для обоих качеств и любой поддерживаемой длины. Подарки и ежедневные награды тоже подходят, администраторы платят столько же. Подтверждённые сбои возвращают кредиты.
Что проверить, если губы плохо следуют за голосом?
Проверьте разборчивость голоса, края фрагмента и видимый рот на фото. Упростите указания и сравнивайте по одному изменению. Точное совпадение всех слогов не гарантируется.