Kuva videoksi tekoälyllä: miten se toimii ja mitä sille annetaan

Kuva videoksi tekoälyllä ottaa yhden kiinteän kuvan ja tekee siitä lyhyen klipin: muutaman sekunnin liikkeen, jonka malli keksii kuvasi ympärille, sen sijaan että kuva jäisi jäätyneeksi. Lataat kuvan, valitset tai kuvaat haluamasi liikkeen, ja videomalli piirtää uusia kuvia, jotka seuraavat liikettä ja yrittävät pitää muun kuvan samana.

Yksi lause peittää alleen hyvin erilaisia tuloksia sen mukaan, mitä syötät. Selkeä, hyvin valaistu ja valmis kuva tulee yleensä takaisin uskottavana klippinä. Huonolaatuinen tai huonosti valaistu kuva tulee usein takaisin vääristyneenä, koska malli improvisoi liikettä kohdissa, joista se ei ole varma. Loppu tästä oppaasta käsittelee ensimmäisen tuloksen saamista ja kertoo rehellisesti, mistä toinen tulee.

Miten kuva videoksi tekoälyllä oikeasti toimii

Kiinteä kuva ei sisällä mitään tietoa liikkeestä, joten mallin on keksittävä se. Malli katsoo kuvaa, arvioi karkeasti mitä siinä on, kasvot, hiukset, kangas tai tausta, ja tuottaa kuvasarjan, joka jatkuu loogisesti tästä yhdestä lähtöpisteestä ja jota ohjaa pyytämäsi liike.

Tämä eroaa videosta, joka luodaan tyhjästä. Tässä ensimmäinen kuva on kiinteä: sen on vastattava tarkasti kuvaasi, ja vasta sitten se liikkuu. Mitä paremmin malli pitää tuon ensimmäisen kuvan, sitä vähemmän henkilö tai kohtaus ajautuu toiston aikana.

Käytännössä tästä seuraa kaksi asiaa:

• Kuva ratkaisee enemmän kuin ohje. Kuva, jossa kasvot näkyvät selvästi, valo on kunnollinen eikä liikeheilahtelua ole, antaa mallille vahvan ankkurin. Tumma, epäselvä tai sotkuinen kuva antaa vähemmän kiinnekohtia, ja klippi poikkeaa alkuperäisestä enemmän.
• Lyhyt ja tarkka liike toimii paremmin kuin pitkä ja epämääräinen. Viiden sekunnin klippi yhdellä selkeällä liikkeellä, kuten hiusten heilautus, välähdys tai kameran etääntyminen, pysyy yleensä koossa. Pidempi klippi, joka vaatii useita asioita yhtä aikaa, yleensä ei pysy.

Millainen lähdekuva toimii

Useimmat oppaat ohittavat tämän osan, vaikka se vaikuttaa tulokseen enemmän kuin työkalun valinta.

1. Aloita kuvasta, jonka julkaisisit joka tapauksessa. Jos kiinteä kuva ei ole kunnossa, video näyttää tuolta kuvalta liikkuvana, ei parempana versiona. Korjaa kuva ensin ja animoi se vasta sitten.
2. Yksi selkeä kohde. Yksi kasvo tai hahmo antaa mallille yhden asian seurattavaksi. Ryhmäkuvat ja vilkas tausta antavat sille useita liikkuvia osia arvattavaksi samaan aikaan.
3. Hyvä, tasainen valo. Kasvojen kovat varjot tai hyvin tumma kuva ovat yleisin syy vääristyneeseen klippiin, koska malli ei voi tietää, minkä muotoinen on varjon alla.
4. Ei olemassa olevaa liikeheilahtelua. Kuva, joka on jo hieman epäterävä kameran tärinän takia, vahvistuu, kun malli lisää oman liikkeensä päälle.
5. Asento, jossa on liikkumavaraa. Pää- ja hartiakuva sopii hiusten heilautukseen tai välähdykseen. Asetelmallinen, hieman laajempi kuva sopii paremmin hitaampaan kameraliikkeeseen.

Jos kuva epäonnistuu jossain näistä kohdista, uusi kuva on lähes aina nopeampi kuin tuloksen korjaaminen toisella ohjeella.

Liike itsessään on tärkeämpi kuin ihmiset luulevat

Useimmat kuva videoksi -työkalut antavat kirjoittaa vapaan tekstimuotoisen liikkeen. Se kuulostaa joustavalta, mutta tuottaa yleensä epäjohdonmukaisen tuloksen, koska malli joutuu arvaamaan, mitä tarkoitat sanoilla “saa se elämään”. Lyhyt lista nimettyjä liikkeitä, joista jokainen on testattu oikeilla kuvilla, on luotettavampi kuin avoin kenttä.

Näin Flashette tekee kuvasta videon: viisi kiinteää liikettä, salamapop, hiusten heilautus, pikaisten asentojen sarja kuin kuvakopissa, hidas elokuvamainen zoom ja spontaani nauru. Jokainen on viritetty valmiille ilmeelle, ei raakaan selfieen. Yhden valitseminen ei ole niinkään rajoitus kuin ero liikkeen välillä, joka on tarkistettu tämän tyyppisellä kuvalla, ja liikkeen välillä, jota kukaan ei ole kokeillut.

Hinta ja aika

Videomallin ajaminen kuuluu tekoälyn kalliimpiin toimenpiteisiin per klippi, siksi melkein yksikään kuva videoksi tekoälyllä -työkalu ei ole rajaton ja ilmainen. Flashettessä valokuvaefekti maksaa 1 krediitin ja video valmiista ilmeestä 5 krediittiä. Krediitit tulevat Flashette Prossa viikoittaisista krediiteistä (7,99 dollaria viikossa tai 19,99 dollaria kuukaudessa, Yhdysvaltain hinnat) tai krediittipaketeista, jotka ostetaan ilman tilausta. Klippi tulee yleensä takaisin yhdestä kolmeen minuuttiin lähettämisen jälkeen. Jos luonti epäonnistuu, käytetyt krediitit palautetaan automaattisesti, kuten tukisivulla kerrotaan.

Tämä kustannusrakenne on yleinen kuva videoksi tekoälyllä -työkaluissa: joko muutama ilmainen klippi ennen maksumuuria tai krediitit ja tilaus heti alusta, koska jokainen klippi lasketaan palvelimella eikä puhelimellasi.

Ilmaisia tapoja saada liikettä kuvasta

Ennen tekoälyn käyttämistä kannattaa tietää, mikä ei sitä tarvitse:

• Live Photos iPhonessa tallentaa noin puolitoista sekuntia liikettä laukaisimen painamisen ympäriltä, eikä niitä tarvitse käsitellä.
• Hidas panorointi ja zoomaus kiinteän kuvan päällä, tunnetaan Ken Burns -efektinä, antaa liikkeen tuntua ilman mitään generointia, ja useimmat muokkaussovellukset tarjoavat sen ilmaiseksi.
• Boomerang-tyylinen silmukka muutamasta sarjakuvasta toimii yksinkertaiselle toistuvalle liikkeelle, kuten hiusten heilautukselle, ilman mitään mallia.

Mikään näistä ei luo uutta liikettä niin kuin kuva videoksi tekoälyllä. Ne käyttävät liikettä, jonka olet jo tallentanut, tai siirtävät kehystä. Jos haluat kuvan, joka näyttää paikallaan olevalta mutta tekee jotain, mitä se ei koskaan tehnyt, kuten salaman, joka räjähtää, tai asennon, joka vaihtuu, siihen tarvitaan malli, ja siinä krediitit kuluvat.

Yksityisyys: mitä kuvalle tapahtuu

Ennen kuvan lataamista mihin tahansa kuva videoksi tekoälyllä -työkaluun kannattaa tarkistaa, mitä sille tapahtuu sen jälkeen: tallennetaanko se, kuinka kauan, ja käytetäänkö sitä tulevien mallien opettamiseen. Flashettessa videon tekemiseen käytettävä kuva on se, joka sinulla on jo galleriassa tekoälyilmeestä. Alkuperäinen selfiesi lähetettiin tekoälykumppanille vain kerran, jotta tuo kuva syntyi, eikä sitä koskaan tallennettu. Vain valmis kuva ja video säilytetään, jotta ne näkyvät galleriassasi. Kaikki yksityiskohdat ovat tietosuojakäytännössä.

Selfiestä videoksi iPhonella, vaihe vaiheelta

Tämä on järjestys, joka seuraa kaikesta edellä sanotusta:

1. Aloita valmiista kuvasta, älä raakasta selfiestä. Flashettessa se tarkoittaa, että valitset ensin ilmeen. Ennen kuin animoit sen, kannattaa tietää, mitä tekoälykuvankäsittely muuttaa selfiessä.
2. Tarkista kuva täydessä koossa. Korjaa huono rajaus tai valo ennen kuin käytät krediittejä liikkeeseen.
3. Valitse yksi liike, älä epämääräistä ajatusta “jotain liikkuu”. Tarkka liike, kuten hiusten heilautus tai kameran etääntyminen, antaa mallille selkeän tehtävän.
4. Lähetä ja odota. Yhdestä kolmeen minuuttia klipin renderöintiin on normaalia, eikä sovelluksen tarvitse olla auki.
5. Katso koko klippi ennen tallentamista. Jos käsi tai reuna vääristyy kesken klipin, toinen lähdekuva korjaa sen useammin kuin toinen liike.
6. Tallenna tai jaa, kun se pitää. Video säilyttää saman kuvan, josta aloitit, mutta nyt se liikkuu.

Mitä seuraavaksi

Kuva videoksi tekoälyllä on vain niin hyvä kuin kuva, jonka annat sille, joten hyödyllisin vaihe on valita tai valmistaa kuva, joka kannattaa animoida. Flashette rakentaa ensin tuon kuvan ilmeellä ja muuttaa sen sitten viiden sekunnin videoksi yhdellä viidestä testatusta liikkeestä iPhonella. Lisää kuvavaiheesta löytyy Flashette-blogista.