Black Friday sale50% OFFyour first month

Get 50% off

Officiële BytePlus-partnerBytePlus, een bedrijf van ByteDance

Officiële BytePlus-partner · OmniHuman 2.0

AI lip sync: maak sprekende video's van foto's en geluid

Upload een foto, voeg geluid toe en de persoon op de foto zal elk woord uitspreken of zingen met natuurlijke expressies en bewegingen. Loop met OmniHuman 2.0, het audio-gebaseerde model van ByteDance, met één take tot 5 minuut.

  • Tot 5 minuten
  • Spreken, zingen, rap
  • Personen, personages, dieren
  • 720p of 1080p
  • 4 credits per seconde

Lip Sync is een betaalde tool. Twee manieren om met een klein bedrag te beginnen: een proefperiode van 48 uur voor $3 (60 credits, ongeveer 15 seconden in 720p; daarna gaat Creator door voor $19 in de eerste maand en $25/maand, tenzij je binnen die 48 uur opzegt; ook beschikbaar bij Pro (60 credits, daarna $49/maand) of Max (60 credits, daarna $99/maand)) of een creditpakket vanaf $8 (160 credits, ongeveer 40 seconden in 720p, eenmalig betaald zonder abonnement).

Op deze pagina
  1. Wat je kunt maken met AI lip sync
  2. Maak lip sync-video's in 3 stappen
  3. Video's die je kunt maken
  4. Waar komt het geluid vandaan?
  5. Prijs van lip sync-video's
  6. Meest gebruikt voor
  7. Tips voor een natuurlijk resultaat
  8. Veelgestelde vragen over AI lip sync
  9. Zie ook

Wat je kunt maken met AI lip sync

AI lip sync gebruikt twee dingen: een foto van iemand en wat die persoon moet zeggen. Het resultaat is een video waarin die persoon echt praat. Lip sync in KreatorFlow gebruikt OmniHuman 2.0, het nieuwste audio-gestuurde videomodel van ByteDance. KreatorFlow is een officiële partner van BytePlus, een bedrijf van ByteDance en draait dit model via BytePlus.

Audio-gestuurd betekent dat het geluid de video aanstuurt. De mondbewegingen passen bij de woorden, wenkbrauwen en hoofd reageren op nadruk, pauzes lijken op echte pauzes, en nummers klinken echt gezongen in plaats van dat alleen de lippen worden gekoppeld. Tekstuele aanwijzingen zijn voldoende voor elementen die niet door audio worden gedekt, zoals een glimlach, een knik of een langzaam inzoomende camera.

Eén generatie kan tot 5 minuten duren, dus een talk, lesmateriaal, productintroductie of een volledig nummer kan één ononderbroken video worden met hetzelfde gezicht, zonder korte clips aan elkaar te plakken.

Maak lip sync-video's in 3 stappen

  1. 1

    Foto uploaden

    Upload een duidelijke foto met een persoon, personage of huisdier, of kies uit geüploade bestanden, door jou gemaakte afbeeldingen of opgeslagen personages. Het beste resultaat krijg je met een foto waarop één gezicht ongeveer naar de camera kijkt en de mond niet bedekt is.

  2. 2

    Audio toevoegen

    Typ een script en kies een standaardstem, of upload je eigen opname, een nummer of een audiobestand vanuit een audio studio (MP3 of WAV). De audiolengte kan 4 seconden tot 5 minuut zijn.

  3. 3

    Genereren en downloaden

    Kies 720p of 1080p, voeg eventueel bewegings- en camerasturing toe, en druk op genereren. De prijs wordt vooraf getoond: 4 credits per seconde in 720p en 6 credits per seconde in 1080p. De videolengte komt overeen met de audio, en het resultaat wordt opgeslagen in je bibliotheek.

Video's die je kunt maken

Eén opname tot 5 minuten

Audio kan 4 seconden tot 5 minuut zijn, en de videoduur is precies hetzelfde als die van de audio.

Pratende foto's, zingende foto's

Gesprekken, narratie, nummers, tot snelle rap. Mondbewegingen, intonatie en emotie volgen de audio.

Mensen, personages, dieren

Portretten, anime- en cartoonpersonages, 3D-personages, fantasiewezens en dieren kunnen worden geanimeerd.

Elke taal

Het model volgt de klanken, dus Nederlands en andere talen of accenten kunnen worden gebruikt zolang er audio is.

Bewegingsaanwijzingen

Schrijf bewegingen, emoties, camerabewegingen en gebeurtenissen in de achtergrond tot 2.000 tekens.

720p of 1080p

4 credits per seconde op 720p en 6 credits per seconde op 1080p, zichtbaar vóór generatie.

Waar komt het geluid vandaan?

Standaardstem. Typ wat er gezegd moet worden en kies een van de Engelse stemmen op het lipsync-scherm. De dialogen maak je eerst met text to speech (2 credits per 1.000 tekens), daarna de video.

Je eigen opname. Neem op met je telefoon en upload als MP3 of WAV. Hoe schoner het geluid en hoe minder ruis, hoe duidelijker de lipbewegingen.

Geluid uit de audio studio. Maak dialogen met text to speech in meer talen en stemmen, of kloon je eigen stem. De geluidsbestanden die je maakt, verschijnen in de lijst met lip sync-audio.

Nummer. Upload een vocal track waarvan je de rechten hebt. Als er alleen een complete mix is, werkt een versie met zachte achtergrondmuziek vaak beter.

Prijs van lip sync-video's

Credits worden berekend per seconde audio die start, met dezelfde code die de studio gebruikt om credits af te trekken.

720p per seconde

4

credits

1080p per seconde

6

credits

Lip sync-credits op basis van audioduur en resolutie
Audioduur720p1080p
4 s16 credits24 credits
10 s40 credits60 credits
30 s120 credits180 credits
1 min240 credits360 credits
5 min1.200 credits1.800 credits

Minimale duur is berekend op 4 seconden, en de langste video van 5 min kost 1.200 credits credits bij 720p. Lip sync vereist een betaald account: een abonnement (Creator vanaf $19 in de eerste maand) of een creditpakket (vanaf $8). Eén van beide is voldoende. Credits voor mislukte video's worden automatisch teruggestort. Alle abonnementen staan op pagina . prijzenPrijzen zijn in Amerikaanse dollars.

Meest gebruikt voor

  • Productintroductievideo's en reclamevideo's met modellen, gemaakt van één foto van je merk.
  • Cursus- en trainingsvideo's met dezelfde presentator in elke sessie.
  • Verjaardagswensen en bedankboodschappen van je eigen foto en stem.
  • Muziekvideo's en virtuele zangers, gemaakt van personages en vocale tracks.
  • Zelfde boodschap in meerdere talen, gebaseerd op één foto.
  • Luisterboeken, podcasts en nieuwsvideo's met een gezicht.
  • Sprekende mascottes, huisdieren en tekenfilmfiguren voor sociale media.

Tips voor een natuurlijk resultaat

  • Gebruik een scherpe foto met één duidelijk zichtbaar gezicht. Close-ups en halve lichaamshot zijn het beste; foto's op afstand met een klein gezicht zijn minder geschikt.
  • Bedek je mond en kin niet. Handen, microfoons of haar mogen je lippen niet verbergen.
  • Gebruik schone audio. Ruis en harde achtergrondmuziek maken de lipbewegingen minder nauwkeurig.
  • Schrijf alleen bewegingsinstructies, in gewone zinnen. Bijvoorbeeld: “glimlachen terwijl je praat en dan naar de camera leunen”. Dingen die al op de foto staan hoef je niet te beschrijven.
  • Probeer eerst een korte dialoog in 720p voordat je een lange video in 1080p maakt.

Toestemming en verantwoord gebruik

Lip sync laat de persoon op de foto de audio letterlijk uitspreken, dus de regels zijn duidelijk. Bij de eerste generatie met een nieuwe foto vraagt de website om bevestiging dat het om jezelf gaat of dat je toestemming hebt. Foto's worden gecontroleerd voordat credits worden afgeschreven, en foto's met naaktheid of met minderjarigen worden niet verwerkt.

  • Gebruik je eigen foto of een foto van iemand die toestemming heeft gegeven voor het laten spreken van zijn of haar gezicht. Je mag ook je eigen personages, dieren en illustraties gebruiken.
  • Gebruik alleen geluiden die je mag gebruiken: je eigen stem, ingebouwde stemmen, gekloonde stemmen met toestemming, of opnames die zijn goedgekeurd. Dit geldt ook voor muziek en nummers.
  • Seksuele inhoud, inhoud met kinderen onder 18 jaar en identiteitsnabootsing zijn verboden. Maak geen echte mensen na alsof ze dingen zeggen die ze nooit hebben gezegd, om te misleiden, pesten of oplichting te plegen.
  • Publieke figuren zoals beroemdheden en politici mogen niet worden gebruikt zonder hun toestemming en het recht op gebruik.
  • Als je een video uploadt van een echt persoon die spreekt, vermeld dan dat de video met AI is gemaakt. Veel platforms vereisen dit label.

De volledige lijst met verboden vind je in Gebruiksbeleid (in het Engels).

Veelgestelde vragen over AI lip sync

Wat is AI lip sync?

Een technologie die een stilstaande foto combineert met audio, zodat de persoon op de foto lijkt te praten of zingen. Bij KreatorFlow werkt deze functie met OmniHuman 2.0, een audio-gedreven videomodel van ByteDance. De mondbewegingen komen overeen met elk woord, en gezicht, hoofd en bovenlichaam bewegen mee met het ritme en de emotie van de stem.

Hoe lang kan de video worden?

De videolengte komt overeen met de audiolengte, en per generatie is 4 seconden tot 5 minuut mogelijk. Dit is genoeg voor een presentatie, lesmateriaal, één podcastsegment of een volledig nummer in één opname.

Wat kost AI lip sync?

Per seconde audio: 4 credits credits voor 720p en 6 credits credits voor 1080p, berekend per seconde met een minimum van 4 seconden. Een clip van 10 seconden in 720p kost 40 credits, en 1 minuut kost 240 credits. De exacte prijs wordt weergegeven voordat je genereert, en credits voor mislukte video's worden terugbetaald.

Heb je een betaald abonnement nodig?

Ja. Lip sync werkt met een betaald abonnement of een creditpakket. Abonnementen beginnen vanaf Creator $19 in de eerste maand, en het kleinste creditpakket is $8 (160 credits). Beide resoluties zijn beschikbaar voor alle betaalde accounts.

Kan de foto ook zingen, niet alleen praten?

Ja. OmniHuman 2.0 volgt praten, zingen en zelfs snelle rap. Upload een vocaal spoor: hoe minder achtergrondmuziek en hoe schoner de stem, hoe beter de lipbewegingen.

Kan ik Nederlands gebruiken?

Ja. Het model volgt de klanken van de audio, dus elke taal kan worden gebruikt. De standaardstemmen op het lip sync-scherm zijn in het Engels. Voor Nederlandse dialogen maak je de stem aan met een Nederlandse stem in de audio studio, of upload je je eigen opname.

Werkt het ook met cartoonpersonages of dieren?

Ja. Naast echte mensen, anime- en cartoonpersonages, 3D-personages, fantasiewezens en dieren zoals katten of wasberen kunnen worden geanimeerd met OmniHuman 2.0, zolang het gezicht duidelijk zichtbaar is.

Mag ik foto's van anderen gebruiken?

Alleen met toestemming van die persoon. De persoon op de foto moet jijzelf zijn of toestemming hebben gegeven, en je moet de rechten hebben op de stem en de muziek. De website vraagt om bevestiging voor elke nieuwe foto. Het gebruik van beroemdheden en publieke figuren zonder toestemming is niet toegestaan, evenals seksuele inhoud of inhoud met minderjarigen.

Kan ik mijn eigen stem of een gekloonde stem gebruiken?

Ja. Upload je eigen opname, of kloon je stem in de audio studio, maak een audiobestand en kies dit bij lip sync. Als je een standaardstem gebruikt, worden de kosten voor text to speech (2 credits per 1.000 tekens) toegevoegd aan de videoprijs.

Is er een lip sync API?

Ja. Ontwikkelaars roepen /v1/lip-sync aan met een foto en audiobestand, en betalen per seconde met prepaid tokens: $0.20 per seconde voor 720p en $0.30 per seconde voor 1080p. Details staan op de OmniHuman API-pagina (in het Engels).

Maak je eerste sprekende video

Open lip sync, upload een foto en audio, en de prijs wordt weergegeven voordat je genereert. Je kunt het gebruiken met een betaald abonnement of een creditpakket.

Lip Sync is een betaalde tool. Twee manieren om met een klein bedrag te beginnen: een proefperiode van 48 uur voor $3 (60 credits, ongeveer 15 seconden in 720p; daarna gaat Creator door voor $19 in de eerste maand en $25/maand, tenzij je binnen die 48 uur opzegt; ook beschikbaar bij Pro (60 credits, daarna $49/maand) of Max (60 credits, daarna $99/maand)) of een creditpakket vanaf $8 (160 credits, ongeveer 40 seconden in 720p, eenmalig betaald zonder abonnement).

Zie ook