I přes to, že jsou dnešní smartphony schopné nahrávat videa ve zpomaleném režimu třeba i 240 snímků za vteřinu, najde se několik překážek. Největší z nich je nedostatek paměti na zařízení a velký požadavek na výkon, který rapidně vybíjí baterii.
Společnost Nvidia však našla řešení tohoto problému. Vytvořila systém založený na hlubokém učení, který video transformuje z rychlosti 30 snímků až na 480 snímků za vteřinu. Technologie umožňuje video zpomalovat mnohem kvalitněji než v případě normálního zpomalení. Zpomalení videa funguje na principu dvou konvolučních neuronových sítí – mezi jednotlivými snímky domýšlí mezikrok.
První neuronová síť předpovídá, jak se pixely budou pohybovat z jednoho snímku na druhý, čímž vytvoří 2D vektory těchto posunutí.
Druhá neuronová síť, která předpovídá mapu viditelnosti, vylučuje ty pixely, které by měly být překryty objekty.
Ale i přes to, že rozdíl mezi videem zpomaleným pomocí neuronové sítě a videem natočeným profesionální kamerou ve zpomaleném režimu rozhodně poznáte, jedná se o skvělou technologii s příslibem užití v budoucnu.
Autor: Dmytro Molokoiedov
https://youtu.be/MjViy6kyiqs
Zdroj: https://habr.com/post/414953/
