Skapa video från bilder av ansiktet som rör sig och pratar

Upptäck kraften i AI-animering! Den här artikeln utforskar kostnadsfria verktyg för att få foton att prata, med fantastiska exempel som Hedra och MyHeritage.
Vi har pratat många gånger i denna blogg om animerade bilder, eftersom de objektivt sett är mycket attraktiva och roliga att se. Medan de animerade effekterna på bilder för några år sedan verkade mycket artificiella och orealistiska, har de senaste teknologierna baserade på artificiell intelligens lett till en otrolig realism, som gör det möjligt att inte bara animera ansiktet på en person i ett foto, utan även att skapa videor där man sätter en annan ansikte på huvudpersonen (de så kallade deepfake-videorna).
Nyligen har det kommit många verktyg för att animera foton, få dem att prata eller röra sig i en video. De mest intressanta är de som får en avatar eller ett foto av sitt eget ansikte att prata med synkroniserade läppar, även om nästan alla är betalverktyg. I denna artikel tar vi en titt på de mest intressanta kostnadsfria lösningarna.
Hedra.com
Med webbplatsen Hedra.com är vi verkligen på de högsta nivåerna av AI-utvecklingen. Här kan du ladda upp ett foto, skriva en tal och sedan se hur ansiktet från fotot pratar, med en naturlighet som verkar helt verklig. Du kan alltså få foton att prata genom AI, med en effekt som nästan verkar verklig.
Hedra kan användas kostnadsfritt med en del bonuspoäng som förnyas varje dag. Logga in med ett Google-konto, gå till sektionen Video och ladda sedan upp fotot på ett ansikte där det står + image frame, med ditt eget ansikte.
Skriv en kort prompt, exempelvis "character talking", och lägg sedan till ljud genom att trycka på + Audio script. Du kan generera ett ljud från grunden genom att skriva vad den ska säga och välja röst (det finns en röst för italienska) eller ladda upp en ljudfil eller spela in den live.
När du är klar, tryck på knappen för videogenerering och vänta på att det ska slutföras. Videon kan sedan laddas ner och delas på sociala medier, även utan vattenstämpel.
LivePortrait
En helt kostnadsfri lösning för att animera foton precis som man vill. På HuggingFace-webbplatsen publicerades projektet för animation av ett foto där du kan återskapa rörelser från valfritt video.
För att använda verktyget, ladda upp ett foto till vänster, en video till höger. Tryck på Animate och se hur ansiktet på fotot exakt upprepar rörelserna i videon.
För att göra ett snabbt prov kan du välja foton och videor från de exempel som tillhandahålls. Jag som ville prova något mer, återskapade den mest kända dansen på TikTok, den MtotheB av Bella Poarch, med resultat som syns här nedanför (notera att musiken i videon bibehålls).
MyHeritage
Den senaste nyheten kommer från webbplatsen MyHeritage, kanske den mest kända webbplatsen för att skapa ett släktträd, som har släppt en webbapplikation driven av artificiell intelligens för att animera ansiktet i foton, med det uttalade målet att ge liv åt de avlidna. Tack vare denna tjänst, förvandlas gamla porträtt till korta videoanimationer som också kan prata.
Till skillnad från appar för att skapa deepfakes, fungerar Deep Nostalgia från MyHeritage inte genom att skapa en video med personens ansikte, utan genom att förvandla ett foto till en video där ansiktet på fotot rör sig på ett realistiskt och mycket rent sätt, vilket verkar verkligt (och påminner mycket om animationerna av foton i Harry Potter-filmerna).
För att använda det onlineverktyget Deep Nostalgia AI, behöver du bara öppna MyHeritage-webbplatsen och registrera ett kostnadsfritt konto med e-postadress eller via Facebook. Efter inloggning kan du ladda upp en bild och låta webbplatsen arbeta i några sekunder tills videon genereras där ansiktet från fotot rör sig, ändrar uttryck på ett realistiskt sätt och rör på huvudet.
Videon kan sedan delas online eller laddas ner i MP4-format. När den har laddats ner kan videon också konverteras till en GIF-bild för att användas på webbplatser som jag gjort.
gjorde jag med mitt foto här (här ser det inte så bra ut, men detta prov är ett år gammalt och verktyget är mycket bättre nu).
Om detta inte räcker, är det också möjligt från MyHeritage-sidan att animera fotot inom en video, med även tillägg av rösten, vilket gör att personen på bilden faktiskt pratar. Verktyget för att ge liv åt de avlidna och få dem att animeras (som också kan användas med våra porträtt) kallas DeepStory.
MyHeritage fungerar genom att bearbeta foton, skapa en karta över ansiktsdrag som ögon, näsa, mun osv. och sedan koppla denna karta till en förinspelad video (som inte syns) av någon som lutar på huvudet, blinkar och ler.
Det slutliga resultatet är överraskande, ett porträtt i rörelse som alltid är olika, även om det inte finns två Deep Nostalgia-porträtt som är samma, eftersom programvaran använder en ganska stor databas av förinspelade videor för att animera fotona.
Genom att lägga till rösten i LiveStory kan man se att munnen på fotot rör sig som om den verkligen pratar på ett imponerande (och även lite skrämmande) sätt om man använder en bild av en avliden person.
Även om MyHeritage syftar till att animera bilder av avlidna, kan det användas med ens egna bilder för att skapa liv i sin Facebook-profil. Man kan då ladda ner videon av sin profilbild och ladda upp videon som profilbild på Facebook, vilket inte alls är dåligt. Deep Nostalgia kan användas för att animera vilken bild av ett ansikte som helst, även om ansiktet kommer från ett datorspel, en gammal staty eller en illustration.
Det enda begränsningen är att man kan använda verktyget för att omvandla porträtt till video gratis, men bara upp till 5 bilder. Sedan måste man betala för en prenumeration som kostar en del, mer än 100 Euro per år (eller så kan man skapa ett nytt konto med en annan e-postadress).
AIStudios
Innan vi avslutar, nämner vi också den professionella plattformen AIStudios, som drivs av artificiell intelligens och kan generera utmärkta videor med det valda ansiktet, som kan animera talande avatarer att använda i tutorialer eller presentationer.
Nyt kun olet lukenut Skapa video från bilder av ansiktet som rör sig och pratar loppuun, kutsumme sinut tutustumaan lisää Sovellus-kategoriaan. Löydät sieltä muita mielenkiintoisia artikkeleita, jotka laajentavat tietojasi ja pitävät sinut ajan tasalla. Älä lopeta lukemista ja löytämistä!
Vastaa