https://frosthead.com

Nový software může ve skutečnosti upravovat výrazy obličeje herců

Fotografování scény ve filmu může vyžadovat desítky záběrů, někdy i více. V filmu Gone Girl řekl režisér David Fincher průměrně 50 záběrů na scénu. Pro herce sociální sítě Rooney Mara a Jesse Eisenberg jednali úvodní scénu 99krát (režie Fincher znovu; zřejmě je to notoricky známý). Stanley Kubrick's The Shining zařadil 127 záběrů nechvalně proslulé scény, kde Wendy zálohuje schody houpající se baseballovou pálkou na Jacka, široce považovanou za největší počet scén jakéhokoli filmu v historii.

Nový software od společnosti Disney Research ve spojení s University of Surrey může pomoci snížit potřebný počet potřebných úkonů, čímž se ušetří čas a peníze. FaceDirector míchá obrázky z několika záběrů, což umožňuje upravovat přesné emoce na tvářích herců.

„Produkce filmu může být velmi drahá, takže cílem tohoto projektu bylo pokusit se zefektivnit tento proces, “ říká Derek Bradley, počítačový vědec Disney Research v Curychu, který pomohl s vývojem softwaru.

Disney Research je mezinárodní skupina výzkumných laboratoří zaměřených na druhy inovací, které by mohly být pro Disney užitečné, a sídlí v Los Angeles, Pittsburghu, Bostonu a Curychu. Mezi poslední projekty patří robot na lezení na stěně, „omalovánky s rozšířenou realitou“, kde děti mohou obarvit obrázek, který se v aplikaci stává pohyblivým 3D postavou, a vestu pro děti, která poskytuje pocity, jako jsou vibrace nebo pocit dešťových kapek, které odpovídají scény pohádky. Tým za FaceDirector pracoval na projektu asi rok, než představil svůj výzkum na Mezinárodní konferenci o počítačovém vidění v Santiagu v Chile v prosinci minulého roku.

Hlavním cílem projektu a jeho největší výzvou bylo zjistit, jak synchronizovat různé kroky. Herci by mohli mít hlavy natažené v různých úhlech, od brát k brát, mluvit v různých tónech nebo pauza v různých časech. K vyřešení tohoto problému vytvořil tým program, který analyzuje výrazy obličeje a zvukové podněty. Výrazy obličeje jsou sledovány mapováním orientačních bodů obličeje, jako jsou rohy očí a úst. Program poté určí, které snímky lze do sebe zapadnout, jako skládačky. Každá skládačka má více kamarádů, takže režisér nebo editor se pak může rozhodnout pro nejlepší kombinaci a vytvořit požadovaný výraz obličeje.

Za účelem vytvoření materiálu, s nímž se experimentuje, přinesl tým skupina studentů z Curyšské univerzity umění. Studenti jednali několika způsoby sestaveného dialogu, pokaždé prováděli různé výrazy obličeje - šťastní, naštvaní, nadšení a tak dále. Tým byl poté schopen tento software použít k vytvoření libovolného počtu kombinací výrazů obličeje, které zprostředkovaly více emocionálních emocí - smutné a trochu naštvané, vzrušené, ale strašné atd. Dokázali smíchat několik záležitostí - řekněme vyděšených a neutrálních -, aby vytvořily rostoucí a klesající emoce.

Tým FaceDirector si není jistý, jak a kdy by se software mohl stát komerčně dostupným. Produkt stále funguje nejlépe, když je použit se scénami natočenými, zatímco sedí před statickým pozadím. Pohybující se herci a pohybující se venkovní krajina (myslím, že kymácející stromy, projíždějící auta) představují větší výzvu pro synchronizaci.

Nový software může ve skutečnosti upravovat výrazy obličeje herců