Stabilizace v Google Pixel 2 (XL): tolik výpočtů, že si AI video spíše vymýšlí

Stabilizace v Google Pixel 2 (XL): tolik výpočtů, že si AI video spíše vymýšlí
, , aktualita
Google poodkryl tajemství stabilizace v telefonech Pixel 2 a Pixel 2 XL. Tato Fused Video Stabiilization řeší problémy třesu, rolling shutter efektu, focus breathingu a dalších, takže těžko říci, zda ještě vůbec točíte nebo si video telefon sám generuje.
K oblíbeným
reklama
Nové mobilní telefony Google Pixel 2 a Pixel 2 XL jsou vybaveny novou pokrokovou Fused Video Stabilization. Google se totiž zaměřil na to, aby telefony natáčely pokud možno co nejkvalitnější video a ktomu je potřeba, aby bylo stabilní i bez stativu nebo jiných pomůcek. Když se ale podíváme na seznam všeho, co obrazové algoritmy v tomto telefonu vlastně řeší a korigují, reálná scéna se už stává jen jakýmsi předobrazem pro generování výsledného videa.

Google Pixel 2 XL

Výše zmíněná stabilizace kombinuje optickou stabilizaci v objektivu (OIS) a tu elektronickou (EIS). Tato kombinace je schopna potlačit třes rukou (a tedy i telefonu), vyřešit pohybové rozmazání (motion blur efekt delších expozic), rolling shutter efekt (kácení svislic nebo gumovatění obrazu při rychlém pohybu) i focus breathing (změna zoomu při přeostření). Na stabilizační systém docela pěkná řádka funkcí.

Google Fused Video Stabilization

Základem je tak optická stabilizace obrazu, která dokáže uklidnit některé pohyby telefonu, nicméně sama o sobě nezvládá více než zhruba 1 až 2 stupně a navíc ještě jen ve dvou osách. Objektiv je schopen systému předat i informace o zaostření, ale pak už je většina věcí v rukou elektroniky. K informacím poskytovaným systémem optické stabilizace se přidávají i další výstupy z gyroskopu s frekvencí 200 Hz (změny natočení) a jiných senzorů, aby systém věděl co nejvíce informací o poloze a změně polohy telefonu.

Tady už nastupuje systém umělé inteligence a na základě předchozích snímků se snaží předpovědět další pohyb telefonu (virtuální pohyb) a s ním i potřebné korekce, aby celé video bylo prosté různých nepříjemných škubnutí. Na rozdíl od standardních systémů OIS, které reagují na vzniklý třes, zde se Google snaží směr a míru třesu předpovědět a reagovat tak už v době jeho vzniku a ne až poté.


Na základě virtuálního pohybu a předchozích snímků stabilizace potlačuje i focus breathing, rolling shutter i rozmazání pohybem. Pro potlačení rolling shutter efektu telefon synchronizuje údaje z gyroskopu a snímače, aby věděl, kdy přesně se který řádek na čipu vyčítal a jak je posunutý. Rozmazání pohybem se pak opět řeší systémem umělé inteligence, která bere signály z OIS a gyroskopu, vytváří snímek s virtuálním pohybem, který pak prolíná s původním pro vznik lepšího dojmu. Součástí tohoto procesu je identifikování místa, kde expozice rozmazaného snímku začala a kde skončila.

Jak je vidět, rozhodně nejde o jednoduchý proces (spoustu detailů jsme ještě vynechali) a je zde spousta nejrůznějších výpočtů a transformací, které by měly dopomoci k méně roztřeseným výsledkům. Otázkou pak je, jak moc videa vlastně bylo natočeno a jak moc vymyšleno pokročilými algoritmy.



Ceny souvisejících / podobných produktů:


reklama
Nejnovější články
Olympus uvádí malý OM-D E-M5 Mark III s 20MPx čipem Olympus uvádí malý OM-D E-M5 Mark III s 20MPx čipem
Olympus dnes představil nový fotoaparát OM-D E-M5 Mark III, který má přinášet některé z technologií E-M1 Mark II v mnohem menším těle. Má tak 20MPx senzor, vylepšený fázový systém AF s citlivostí od -6 EV a další detaily.
Včera, aktualita, Milan Šurkala2 komentáře
Doporučené fotoaparáty: říjen 2019 Doporučené fotoaparáty: říjen 2019
Při výběru nového zařízení pro pořizování fotografií není jednoduché se vyznat ve stále dost široké nabídce nejrůznějších fotoaparátů. Náš pravidelný průvodce tím nejlepším by vám v tom ale mohl pomoci.
Včera, návod, Milan Šurkala55 komentářů
Nikon prozradil chystané objektivy pro Z-Mount Nikon prozradil chystané objektivy pro Z-Mount
Nikon nás pravidelně informuje o připravovaných objektivech pro svůj nový Z-Mount a nyní už víme plány až do roku 2021. Dostane se na pevná světelná skla, zoomy, ultrazoomy a dokonce i pancake objektivy.
15.10.2019, aktualita, Milan Šurkala8 komentářů
Canon uvedl IVY REC, malý fotoaparát ve formě klíčenky Canon uvedl IVY REC, malý fotoaparát ve formě klíčenky
Na začátku léta oznámila společnost Canon svůj nový fotoaparát IVY REC, který má tvar a velikost typickou spíše pro USB klíčenky. Karabina pro připnutí fotoaparátu pak může sloužit i jako průhledový hledáček.
14.10.2019, aktualita, Milan Šurkala
Fotoaparáty v Apple iPhone 11 Pro (Max) stojí $73,5 Fotoaparáty v Apple iPhone 11 Pro (Max) stojí $73,5
Server TechInsights rozebral 512GB smartphone Apple iPhone 11 Pro Max, aby zjistil, kolik vlastně stojí součástky do něj. Hodnotu spojenou s focením vyčíslil na $73,5 a jde tak o nejdražší položku.
14.10.2019, aktualita, Milan Šurkala1 komentář