Jednou z hlavních předností nové generace je schopnost pracovat rychle s desetibitovým videem natočeným ve schématu 4:2:2. Ve srovnání s kamerami s osmibitovým standardem 4:2:0 zachytí tento formát dvakrát tolik informací o barvě, ale současně potřebuje vyšší výpočetní výkon. Ten dodá právě Blackwell.
V čem je 4:2:2 lepší?
Pro pochopení toho, co formát 4:2:2 znamená, si tahle čísla rozklíčujeme. Označují počet pixelů pro světlonosnou složku Y a obě barevné složky Cb (modrá rozdílová) a Cr (červená rozdílová), které vznikají konverzí z RGB. Bezeztrátová kvalita barvonosných složek se zapisuje jako 4:4:4, tedy plné čtyři pixely.
V praxi se používá několik metod ztrátové komprese, přičemž zmíněná 4:2:2 zpracovává barvy desetibitově a je již blízko kvalitě bezeztrátového schématu. U schématu 4:2:2 má každý řádek podvzorkované dva pixely, zbylé čtyři jsou duplikovány ze vzorku zpracováním jednotlivých složek. Ušetří se tím zhruba třetina šířky pásma.
Grafiky generace Blackwell mají pro desetibitové video dedikovaný hardware. V tomto formátu jsou až 10× výkonnější a zvládnou kódovat i v rozlišení 8K při 75 snímcích. Výsledkem je nejen méně šumu, ale i ostřejší hrany zejména u malých objektů.
Detail na desetibitové vykreslení scény
Formát 4:2:2 podporují také nejpoužívanější aplikace pro práci s videem, jako DaVinci Resolve, CapCut či Wondershare Filmora. U NVIDIE jej podporují grafiky RTX řady 50.
Využití AI pro práci s videem
Generativní modely AI umožňují tvůrcům vytvářet krátká videa nebo rychle generovat obrázky a doplňovat s nimi svůj obsah. Grafiky Blackwell mají jádra Tensor páté generace pro jejich akceleraci.
V aplikaci DaVinci Resolve je například funkce Magická maska, která uživatelům umožňuje přesně vybírat a sledovat objekty, osoby nebo jiné prvky ve scéně. Nejnověji přidává štětec pro další úpravu výběru masek.
DaVinci Resolve: Magická maska
Software pro vylepšení videa Topaz Video AI Pro zase využívá modely umělé inteligence Gaia a Artemis k inteligentnímu zvýšení rozlišení videa až na 16K, většinou ale postačí 4K.
NVIDIA má pro své uživatele připravené modely umělé inteligence prostřednictvím mikroslužeb NIM. Jde o předpřipravené programy, které pak mohou přes API využívat jednotlivé aplikace třetích stran. Mezi nejnovější patří FLUX.1-dev od Black Forest Labs.
- FLUX.1-dev generuje obrázky z textových pokynů
- FLUX.1-Depth-dev přidává mapové pokyny pro hloubkovou mapu pro lepší kontrolu struktury a prostoru
- FLUX.1-Canny-dev využívá detekci hran Canny k přesnější definici tvarů a kompozice
Vygenerování obrázku siamské kočky pomocí FLUX.1-dev podle zadání: „Detailní záběr siamské kočky, po které stéká jemný zlatý inkoust a vytváří složité vzory, jak stéká, zlato slabě září v měkkém světle, styl je minimalistický a abstraktní, osvětlení je nevýrazné se zářivými odlesky, textury zlatého inkoustu, jemné stékání, složité vzory, intimní kompozice."
Známý Adobe Premiere Pro pak nedávno vydal několik nových funkcí umělé inteligence, jako je Adobe Media Intelligence, která využívá AI k analýze záběrů a přiřazování tagů k vašim klipům. To uživatelům umožňuje lépe najít konkrétní záběry popisem jejich obsahu, včetně objektů, lokací, úhlů kamery a dokonce i přepsaných mluvených slov. Proti minulé generaci RTX řady 40 běží tato funkce o třetinu rychleji (měřeno na RTX 5090 vs. RTX 4090).
Vylepšení videa nejen v prohlížeči (RTX Video)
Sada technologií RTX Video využívá sílu AI v grafikách GeForce RTX pro vylepšení přehrávaného videa ve webových prohlížečích. Typicky při sledování videí na Youtube nebo Twitchi v prohlížeči. Je to vlastně takové herní DLSS využité pro video.
Pomocí neuronek jim umí zvýšit rozlišení, přidá ostrost a výsledkem jsou i živější barvy. Pokud máte odpovídající monitor, zvládne převést video na vysoký dynamický rozsah HDR. Nově RTX Video vylepšuje streamovaný obsah i v oblíbeném VLC Media Playeru a lze jej využít i pří práci s videem v DaVinci Resolve nebo Wondershare Filmora.
Sem se mi koukejte!
NVIDIA Broadcast je sada technologií pro streamery a jejich webkameru dostupná majitelům GeForce RTX zcela zdarma. Zvládá vylepšovat obraz, odstraní šum ze zvuku, vylepší hlas i nasvětlení streamujícího a přidá virtuální pozadí či hezkou vinětaci (tmavší rohy videa). Zřejmě nejefektivnější technologií je Eye Contact pro udržování očního kontaktu, kdy se sice reálně díváte mimo kameru na čtecí zařízení nebo jiný tahák, ale umělá inteligence vám na videu oči posune zase do kamery.
AI pohybuje očima řečníka tak, aby simulovala oční kontakt s kamerou - toho je dosaženo odhadem a vyrovnáním pohledu. Oči si zachovávají svou přirozenou barvu a mrkání, a dokonce je k dispozici i funkce odpojení pro případ, že se podíváte příliš daleko, pro plynulý přechod mezi simulovanýma a skutečnýma očima. Funguje to v aplikacích jako Discord, Google Meet, Microsoft Teams, OBS Studio, Slack, Webex či Zoom.
GPU GeForce RTX jsou jedním z pilířů platformy NVIDIA Studio zaměřené zejména na práci s grafikou a videem. Grafické karty GeForce RTX, PC sestavy nebo notebooky s nimi si pohodlně vyberete na Alza.cz.
