Снимането на сцена във филм може да наложи десетки снимки, понякога и повече. В " Gone Girl" се казва, че режисьорът Дейвид Финчър е средно 50 снимки на една сцена. За актьорите в социалната мрежа Рууни Мара и Джеси Айзенберг са действали на сцената на откриване 99 пъти (режисиран от Финчър отново; очевидно той е известен с това). 127 на Стенли Кубрик „ Сиянието“ включва 127 от скандалната сцена, където Уенди отстъпва по стълбите, като замахва с бейзболна бухалка на Джак, която се смята за най-много на сцената на всеки филм в историята.
Нов софтуер, от Disney Research съвместно с Университета в Съри, може да помогне за намаляване на необходимия брой, като по този начин ще спести време и пари. FaceDirector смесва изображения от няколко снимки, което прави възможно редактирането на точни емоции върху лицата на актьорите.
„Изготвянето на филм може да бъде много скъпо, така че целта на този проект беше да се опита да направи процеса по-ефективен“, казва Дерек Брадли, компютърен учен в Disney Research в Цюрих, който помогна за разработването на софтуера.
Disney Research е международна група изследователски лаборатории, фокусирана върху видовете иновации, които могат да бъдат полезни за Disney, с локации в Лос Анджелис, Питсбърг, Бостън и Цюрих. Последните проекти включват робот за катерене по стена, „книга за оцветяване с разширена реалност“, където децата могат да оцветят изображение, което се превръща в движещ се 3D символ в приложение, и жилетка за деца, която осигурява усещания като вибрации или усещане за дъждовни капки, които да съответстват на сцени с разкази. Екипът зад FaceDirector работи над проекта около година, преди да представи своите изследвания на Международната конференция за компютърно зрение в Сантяго, Чили миналия декември.
Измислянето как да се синхронизират различните нужди беше основната цел на проекта и най-голямото му предизвикателство. Актьорите може да имат наклонени глави под различен ъгъл от „за да поемат“, говорят с различни тонове или правят пауза в различно време. За да реши това, екипът създаде програма, която анализира изражения на лицето и аудио сигнали. Изразът на лицето се проследява чрез картографиране на ориентири на лицето, като ъглите на очите и устата. Програмата след това определя кои кадри могат да се поберат една в друга, като парчета пъзел. Всяко парче на пъзела има множество партньори, така че режисьор или редактор след това може да реши най-добрата комбинация, за да създаде желания израз на лицето.
За да създаде материал, с който да експериментира, екипът събра група студенти от Цюрихския университет по изкуствата. Студентите действаха на няколко измислени диалога, всеки път правейки различни изражения на лицето - щастливи, ядосани, развълнувани и така нататък. След това екипът успя да използва софтуера за създаване на произволен брой комбинации от изражения на лицето, които предават по-нюансирани емоции - тъжни и малко ядосани, развълнувани, но страшни и т.н. Те бяха в състояние да съчетаят няколко начина - да речем, изплашен и неутрален - да създадат нарастващи и падащи емоции.
Екипът на FaceDirector не е сигурен как или кога софтуерът може да стане търговски достъпен. Продуктът все още работи най-добре, когато се използва със сцени, заснети, докато седите пред статичен фон. Движещите се актьори и движещите се пейзажи на открито (помислете за люлеене на дървета, преминаване на коли) представляват повече предизвикателство за синхронизация.
