Официален партньор на BytePlusBytePlus, компания на ByteDance
Официален партньор на BytePlus · OmniHuman 2.0
AI lip sync: създай видео с говорещи персонажи от снимки и глас
Качи снимка, добави гласова дорожка, а персонажът на снимката ще изговаря или ще пее всяка дума с естествени изрази и движения. Работи с OmniHuman 2.0, аудио-управляем модел на ByteDance, с едно вземане до 5 минута.
- До 5 минути
- Говорене, пеене и рап
- Хора, персонажи и животни
- 720p или 1080p
- 4 кредита за секунда
Lip Sync е платен инструмент. Два начина да започнеш с малка сума: пробен период от 48 часа за $3 (60 кредита, около 15 секунди в 720p; след това Creator продължава на цена $19 за първия месец и $25/месец, освен ако не откажеш в рамките на 48 часа; налично и с Pro (60 кредита, после $49/месец) или Max (60 кредита, после $99/месец)) или пакет с кредити от $8 (160 кредита, около 40 секунди в 720p, еднократно плащане без абонамент).
Последна промяна:
На тази страница
Какво можеш да създадеш с AI lip sync
AI lip sync приема две неща: снимка на човек и нещо, което той да каже. Резултатът е видео, в което този човек наистина говори. Lip Sync в KreatorFlow използва OmniHuman 2.0 най-новия аудио-управляем видео модел на ByteDance. KreatorFlow е официален партньор на BytePlus, компания на ByteDance и изпълнява този модел чрез BytePlus.
Аудио-управляем означава, че звукът води. Движенията на устата съвпадат със думите, веждите и главата реагират на акцентите, паузите изглеждат като паузи, а песента звучи като истинско пеене, а не просто съвпадение с устата. Писмените инструкции са достатъчни за неща, които аудио не предава, като усмивка, кимане или бавно приближаване на камерата.
Едно генериране може да продължи до 5 минути, така че цял разговор, учебен материал, презентация на продукт или цяла песен могат да станат едно непрекъснато видео със същото лице от начало до край, без сглобяване на къси клипове.
Създай видео с lip sync в 3 стъпки
- 1
Качи снимка
Качи една ясна снимка на човек, персонаж или домашен любимец, или избери от качените, генерираните или запазените персонажи. Най-добри резултати дава снимка с едно лице, обърнато към камерата и с открити устни.
- 2
Добави аудио
Въведи текст и избери един от вградените гласове, или качи собствено записано аудио, песен или гласова линия от Audio studio (MP3 или WAV). Дължината на аудио може да бъде 4 секунди до 5 минути.
- 3
Генерирай и изтегли
Избери резолюция 720p или 1080p, добави по желание инструкции за жестове и движение на камерата, и натисни Генерирай. Цената се показва предварително: 4 кредита за секунда в 720p и 6 кредита за секунда в 1080p. Видеото е с дължина, равна на аудио, и се появява в библиотеката ти.
Видео, което можеш да създадеш
Едно вземане до 5 минути
Аудиото може да продължи 4 секунди до 5 минути, а дължината на видеото е точно същата като на аудио.
Говоряща снимка, пееща снимка
Разговор, разказ, песен, до бърз рап. Движенията на устата, интонацията и емоциите следват аудио.
Хора, персонажи, животни
Портрети, аниме и карикури персонажи, 3D персонажи, фентъзи същества и животни могат да бъдат анимирани.
Всеки език
Моделът следва звука, така че български и други езици или диалекти могат да се използват, ако има аудио.
Инструкции за движение
Напиши движения, емоции, движения на камерата и събития във фона до 2000 знака.
720p или 1080p
4 кредита за секунда в 720p и 6 кредита за секунда в 1080p, показани преди генериране.
Откъде идва гласът?
Вграден глас. Въведи текст и избери един от вградените английски гласове на страницата за синхронизация на устни. Гласовата линия се създава първо чрез текст към реч (2 кредита за 1000 знака), след което видеото.
Твоето собствено записване. Запиши се с телефона си и качи MP3 или WAV. По-чистият звук и по-малко шумове дават по-ясно движение на устните.
Звук от аудио студиото. Създай гласова линия чрез текст към реч на много езици и гласове или клонирай собствения си глас. Гласовите линии, които създадеш, се появяват в избора за аудио на синхронизацията на устните.
Песен. Качи вокална линия, за която притежаваш права. Ако имаш само пълен микс, версия с тиха музика в фона дава по-добри резултати.
Какво струва видео със синхронизация на устните
Кредитите се броят за всяка започната секунда от аудио, прочетени от един и същ код, който студиото използва за таксуване.
720p за секунда
4
кредита
1080p за секунда
6
кредита
| Дължина на аудио | 720p | 1080p |
|---|---|---|
| 4 секунди | 16 кредита | 24 кредита |
| 10 секунди | 40 кредита | 60 кредита |
| 30 секунди | 120 кредита | 180 кредита |
| 1 минути | 240 кредита | 360 кредита |
| 5 минути | 1200 кредита | 1800 кредита |
Минималната дължина, която се брои, е 4 секунди, а най-дългото видео, 5 минути струва 1200 кредита в 720p. Синхронизацията на устните изисква платен акаунт: план (започвайки от Creator започвайки $19 в първия месец) или пакет кредити (започвайки от $8), достатъчен е един от тях. Кредитите за неуспешно видео се връщат автоматично. Всички планове виждаш на страницата цени. Цените в долари.
Популярни приложения
- Презентации на продукти и реклами с говорител от една снимка на бранда
- Обучителни видеа и уроци с един и същ водещ във всяко занятие
- Рождени и благодарствени съобщения от твоя снимка и глас
- Музикални видеа и виртуални певци от персонаж и вокална линия
- Едно и също съобщение на няколко езика от една снимка
- Аудиокниги, подкасти и новинарски сегменти с лице на екрана
- Говорещи маскоти, домашни любимци и анимационни персонажи за социални мрежи
Съвети за естествен резултат
- Използвай остра снимка с ясно видима една лице. Най-добре работят близки планове и полуфигури; малки лица в широки планове не са подходящи.
- Не покривай устните и брадичката: ръце, микрофон или коса не трябва да засенчват устните.
- Използвай чист аудио запис. Шумът и силната музика в задния план правят движението на устните по-малко точно.
- Пиши указанията като обикновени изречения само за движение, например „тя се усмихва, после се навежда към камерата, докато говори“. Не описвай това, което вече е на снимката.
- Тествай кратък запис в 720p, преди да генерираш дълъг клип в 1080p.
Съгласие и отговорно използване
AI lip sync кара лицето на снимката да изговаря аудио запис точно така, както е. Правилата са ясни. При първото генериране с нова снимка сайтът те моли да потвърдиш, че си ти или че имаш разрешение. Снимката се проверява преди да се начислят кредити, а снимки с голи тела или с лица под 18 години не се обработват.
- Използвай собствено изображение или изображение на лице, което е дало съгласие за анимиране на лицето. Можеш да използваш свои персонажи, животни и илюстрации.
- Използвай глас, за който имаш право да го използваш: собствен, по подразбиране, клониран със съгласие или запис с разрешение. Същото важи и за музиката и песните.
- Сексуално съдържание, включващо лица под 18 години и измама с самоличност са забранени. Не създавай записи, в които реални хора казват неща, които никога не са казвали, с цел измама, тормоз или дезинформация.
- Публични лица, като знаменитости и политици, не могат да се използват без тяхното съгласие и права за използване на образа.
- При качване на видео на реално лице, което говори, маркирай, че видеото е създадено с AI. Много платформи изискват това маркиране.
Пълният списък с забрани е в Политика за използване (на английски).
Често задавани въпроси за AI lip sync
Какво е AI lip sync?
Колко дълго може да бъде видеото с lip sync?
Колко струва AI lip sync?
Трябва ли да имам платен абонамент?
Може ли снимката да пее, а не само да говори?
В кои езици работи lip sync?
Работи ли с анимационни персонажи, 3D модели и животни?
Мога ли да използвам снимка на друг човек?
Мога ли да използвам собствения си глас или клониран глас?
Има ли API за lip sync?
Създай първия си говорещ клип
Отвори Lip Sync, качи снимка и аудио запис, а цената ще се покаже преди генерирането. Достъпно е с всеки платен план или пакет кредити.
Lip Sync е платен инструмент. Два начина да започнеш с малка сума: пробен период от 48 часа за $3 (60 кредита, около 15 секунди в 720p; след това Creator продължава на цена $19 за първия месец и $25/месец, освен ако не откажеш в рамките на 48 часа; налично и с Pro (60 кредита, после $49/месец) или Max (60 кредита, после $99/месец)) или пакет с кредити от $8 (160 кредита, около 40 секунди в 720p, еднократно плащане без абонамент).