Sledujte výzkumné pracovníky Animujte statické obrazy pomocí fascinujícího strojového učení

Animace je krásná, ale vytváření pohyblivých obrázků je neuvěřitelně náročné na práci. Vizuální a umělecká oddělení, která pracovala na filmu Moana sám počítal téměř 300 lidí, podle úvěrových výpisů na IMBD. Nový proces vyvinutý výzkumnými pracovníky v Princetonu má však potenciál radikálně zjednodušit některé části procesu s fascinujícími výsledky.

Nástroj v podstatě umožňuje uživatelům vybrat si část statického obrazu, který chtějí animovat, například dešťové kapky na scéně bouří, nebo částice páry pohybující se spalovacím motorem.

Uživatel pak manipuluje s tou částí svého obrazu, aby určil, jak rychle se má animace pohybovat, na kterém místě algoritmus přebírá a extrapoluje své instrukce na všechny ostatní podobné objekty na obrázku. To má potenciál zachránit animátory hodně času, zatímco také dělat to daleko jednodušší pro amatéry dělat věci jako cinemagraphs - fotografie kde jedna část obrazu je oživená.

„Osoba poskytuje informace o tom, jaké aspekty scény by chtěli oživit,“ vysvětluje spoluautor Adam Finkelstein ve svém prohlášení. „Počítač odstraní většinu obtížnosti a únavy, která by byla nutná k vytvoření animace zcela ručně.“

Je to technika, která se těžko rozvíjela, než si myslíte. Strojové učení je velmi dobré při identifikaci věcí na fotografiích, které jsou vázány pravidly přírody a relativně konzistentní. Obrazy natažené lidskou rukou nejsou přirozeně konzistentní: Každý člověk nebo umělec má svůj vlastní styl.

„Je tu tak široká škála stylů kreslení,“ vysvětluje Nora Willett, postgraduální studentka na Princetonském katedře informatiky a vedoucí autor. „Je jen málo dat, aby se stroj naučil rozpoznávat každou fantastickou kresbu.“

K překonání této překážky vědci navrhli rozhraní, které lidem a strojovému učení usnadnilo spolupráci. Začali s aplikací Autodesk SketchBook Motion, která může vytvářet animace, ale vyžaduje, aby uživatelé buď vytvořili ručně nebo kompilovali desítky vrstev prostřednictvím jiné aplikace, jako je Adobe Photoshop.

Aby se otestovalo jejich rozhraní, Willettův tým rekrutoval šest lidí s různým stupněm animačních zkušeností, z nichž dva byli dost dobří, aby sami vytvořili vlastní animace. Prezentovali svou novou metodu teprve minulý týden v Asociaci pro výpočetní techniku ​​Symposium na téma Software a technologie uživatelského rozhraní.