NVIDIA RTX Broadcast Engine: AI pro streamery
27.9.2019, Jan Vítek, aktualita
NVIDIA si připravila jednu specialitku, která se bude hodit při živém streamování videa. Nyní budeme moci využít karty GeForce RTX pro Broadcast Engine, který s využitím AI dokáže stream upravit a vylepšit. Jak?
NVIDIA RTX Broadcast Engine tak využije výkon jader Tensor na moderních kartách k tomu, aby mohl vylepšit streamovaná videa. Řada webkamer, respektive jejich software, už podobné efekty či funkce nabízí, ovšem NVIDIA dává najevo, že její Broadcast Engine to zvládne daleko lépe.
Máme tu několik funkcí, které spadají do SDK nového RTX Broadcast Engine.
Jednak je to RTX Greenscreen, čili funkce pro odstranění pozadí. Umělá inteligence byla vycvičena tak, aby v obrazu rozpoznala člověka a uměla tak z něj odstranit vše mimo něj. Volný prostor pak může být nahrazen něčím jiným, takže jde prostě o funkci klíčovacího zeleného plátna.
Dále to je RTX AR pro detekci obličejů a sledování jejich významných bodů, a to především očí a pusy, přičemž z nich se pak může vytvořit drátěný model. Reálný obraz pak může systém upravit a od toho je také pojmenován AR - Augmented Reality. Může jít třeba o změnu "textury" virtuálně nalepené na obličej, anebo rovnou o nahrazení našeho obličeje nějakým virtuálním avatarem, který bude tvářit a mluvit přesně jako my. Ostatně to nejlépe uvidíte sami na následujícím videu.
RTX Style Filters dokáží přizpůsobit celý obraz zachycený webkamerou do zvoleného stylu. Například si jej můžete upravit tak, aby vypadal jako malovaný van Goghem a podobně. K tomu prostě stačí dodat jeden z jeho obrazů a AI si to už přebere sama.
NVIDIA na tom všem spolupracuje se společností OBS, která chce do svého softwaru brzy integrovat RTX Greenscreen a výsledek ukáže na akci TwitchCon.
Zdroj: TZ NVIDIA
