Během současného zablokování koronaviru explodovaly hovory se zoomem. Ale pokud jste již vyčerpali možnosti různé úhly a kulisy pro vaše videohovory, proč nezkusit být úplně jinou osobou? Víte, jako bývalý generální ředitel Apple a spoluzakladatel Steve Jobs.
Alespoň to je technologická ukázka/experiment vytvořený kodéry Ali Aliev a Karim Iskakov. Vyvinuli nástroj ve stylu Animoji nebo Memoji s názvem Avatarify to umožňuje uživatelům během videohovorů na sebe překrýt masku v reálném čase.
Jak Avatarify funguje?
Avatarify je založen na umělé neuronové síti s názvem Pohybový model prvního řádu, vyvinutý vědci v Itálii. Je vyškolen na více než 12 000 videích a umožňuje animovat statický obrázek avatara bez ručního ladění. To znamená, že uživatelé musí přidat pouze statický obrázek obličeje. Avatarify z něj pak udělá animovanou masku.
Funguje to tak, že extrahujete klíčové body z videa webové kamery vaší skutečné tváře a poté sledujete klíčové body při pohybu. Dále platí, že tyto informace k obrázku avatara se pohybují, řekněme, jeho nosem současně s vaším vlastním. Animovaný obrázek je poté streamován na Zoom, Skype nebo jakoukoli jinou službu videohovorů, kterou chcete použít.
Chcete -li animovat osobu, stačí umístit její obrázek do konkrétní složky, spustit aplikaci Avatarify a poté zahájit videohovor.
"Ten nápad přišel spontánně, když jsem narazil na pohybový model prvního řádu," řekl Ali Aliev Kult Mac. "Byl jsem překvapen jeho výkonem z hlediska kvality animace... Rozhodl jsem se zesměšnit své kolegy [a] rychle vytvořil prototyp a vtrhl do našeho týdenního hovoru Zoom s tváří slavného bojovníka MMA Khabiba Nurmagomedov. Ocenili vtip. Karim, který je také mým kolegou, dostal nápad. Přenesl to na Mac a vytvořil video s falešným Elonem Muskem. “
Překvapivě přesvědčivé výsledky můžete vidět níže.
Předvolba Steva Jobse
Když se rozhodli zveřejnit Avatarify, dvojice se rozhodla zařadit přednastavení avatarů. "Obdivujeme Steva za jeho oddanost skvělým nápadům, takže jsme ho určitě chtěli mít v předvolbě avatarů," řekl Aliev.
Výsledky samozřejmě nejsou dokonalé. Tento model byl vycvičen na oříznutí obrazu 256 × 256, což znamená, že kvalita - i když je pro volání Zoom naprosto přijatelná - nebude přesně odolávat kontrole HD. Lepší výcvik AI, zejména s extrémními úhly obličeje, by to pomohl zlepšit.
Ještě důležitější je, že na rozdíl od slavných deepfake videí, která jste pravděpodobně viděli, Avatarify pracuje s 2D obrázky. Jak řekl Aliev, o 3D světě neví nic. To je nejpozoruhodnější, pokud jde o rotace hlavy. (Znovu přemýšlejte o tom, jako byste nosili masku z ploché lepenky, nikoli 3D.)
Foto: Karim Iskakov/Ali Aliev
Avatarify má však určitá omezení
"Druhou stranou problému je výkon," řekl. "Právě teď potřebujete počítač poháněný GPU, abyste mohli spustit Avatarify s rozumnými 30 FPS." Spuštění na zařízení pouze s CPU [je nedostatečné] pro příjemné videokonference. Myslíme si, že je možné model zrychlit tak, aby fungoval v reálném čase na CPU-stroji [například] MacBooku. ale je to docela náročný výzkumný problém, který vyžaduje hodně úsilí a času. Další možností, jak zlepšit výkon, na který se díváme, je používání cloudových GPU. [To by znamenalo] všechny těžké výpočty se provádějí někde jinde, ale ne na vašem notebooku. “
Posledním problémem - nevyhnutelným pro každého, kdo se podívá na demo Elona Muska - je to, že hlas zní. Na konci dne je to stále váš hlas vycházející z tváře jiného člověka. Ve skutečnosti došlo k několika docela působivým (a děsivým) ukázkám hluboce falešný zvuk v poslední době schopen replikovat hlas slavných osobností. Tady je ale nebylo možné snadno použít. Takže možná začněte procvičovat své dojmy!
Avatarify lze stáhnout z online úložiště kódů Github. Je zdarma a má otevřený zdroj, i když k jeho zprovoznění budete potřebovat trochu základního porozumění kódování. Potom? Je to jen otázka čekání na další hovor Zoom ...