Umělá inteligence Nvidie vytváří slow-motion videa

Aplikace na tvorbu zpomaleného videa existují už nějakou dobu. Nemáme nyní na mysli jednoduché zpomalení snímkovací frekvence, které jen udělá videosekvenci trhanou, ale aplikace, které chybějící snímky dopočítávají. Nvidia má svou vlastní metodu, kterou prezentovala na vysoce prestižní konferenci Computer Vision and Pattern Recognition (CVPR). Ta využívá systém umělé inteligence s hlubokým učením, který byl naučen na 11 tisících videosekvencí běžných a sportovních aktivit se snímkovací frekvencí 240 fps. K natrénování AI systému využili karty Nvidia Tesla V100.

 

 

Na základě toho se systém naučil zjišťovat, jak to u slow-motion videa "chodí" (tedy jak dopočítat zbývající snímky u nejrůznějších pohybujících se předmětů). Dle tvůrců sice dnešní hardware umí zaznamenávat vysoké snímkovací frekvence nutné pro zpomalení videa, vyžaduje to ale velmi rychlé a velké paměťové buffery a také zpracování je dost výpočetně náročné (Sony má např. u svých kompaktů rychlou DRAM paměť přímo na snímači). Metoda Nvidie umožní vyrobit slow-motion video i z běžně zaznamenané videosekvence.

 

Zpracování AI systémem Nvidie je však podle jejich tvůrců rovněž velmi náročné a nad schopnosti mobilního hardwaru. Dokáží si však představit cloudovou službu, která bude uživatelům převádět videa na zpomalené verze. Jak se můžete podívat na videu, výsledky jsou skutečně velmi slušné a lepší než u mnoha nynějších algoritmů, které se snaží o totéž. Nvidia dokonce zkusila zpomalit i již zpomalená videa od známých Slow Mo Guys.

 

Zdroj: developer.nvidia.com