Apple výzkumníci představili LGTM, framework pro rychlejší 3D rendering ve vysokém rozlišení. Pro Vision Pro to může znamenat ostřejší scénu bez prudkého růstu nároků na výkon.
Apple Vision Pro by si v budoucnu mohla lépe poradit s detailními 3D scénami díky novému výzkumu Apple. Framework LGTM slibuje vyšší rozlišení bez toho, aby nároky na výpočetní výkon rostly stejným tempem jako kvalita obrazu.
Co LGTM vlastně řeší a proč na tom záleží
LGTM vychází z přístupu zvaného feed-forward 3D Gaussian Splatting, tedy metody, která dokáže z jedné nebo několika fotek rychle vytvořit 3D scénu viditelnou z různých úhlů. Jenže s rostoucím rozlišením se tato technika stává čím dál náročnější a v praxi naráží na limity výkonu.
Apple s výzkumníky z Hongkongské univerzity proto navrhli řešení, které odděluje geometrickou složitost od samotného vykreslování. Jinými slovy: tvar scény zůstává jednoduchý, zatímco jemné detaily se doplňují pomocí textur. Výsledek má být detailnější obraz bez typického „výpočetního výbuchu“, který vysoká rozlišení u podobných modelů vyvolávají.
Důležité je i to, že LGTM není úplně nový samostatný model, ale spíš vrstva, která vylepšuje existující postupy. To je z pohledu praxe výhoda: nejde o experiment ve vakuu, ale o technologii, kterou lze stavět na už fungujících systémech a postupně ji posouvat dál.
Jaký dopad to může mít na Vision Pro v praxi
Pro Vision Pro je tenhle výzkum zajímavý hlavně proto, že headset pracuje s obrovským množstvím pixelů. V součtu mají jeho dvě obrazovky přibližně 23 milionů pixelů, takže zobrazit ostrý obraz zvládne, ale generovat složité 3D scény rychle a efektivně je úplně jiný problém.
Právě tady může LGTM pomoct. Pokud se podobný přístup dostane do reálných aplikací, uživatelé by mohli dostat plynulejší zpracování, ostřejší detaily a věrnější prostředí při práci s 3D scénami nebo při průhledu okolím v režimu passthrough. V praxi to znamená méně kompromisů mezi kvalitou a výkonem.
Ve srovnání se staršími metodami je přínos jasný: dřívější per-scene optimalizace bývají stabilní, ale pomalé, zatímco feed-forward přístup je rychlý, jenže v ultra vysokém rozlišení dosud narážel na limity. LGTM se snaží spojit obě výhody dohromady, což je přesně ten typ posunu, který by mohl být pro Apple Vision Pro velmi cenný.
Pro běžného uživatele to zatím neznamená okamžitou novou funkci v systému, ale důležitý směr vývoje. Apple zjevně hledá cesty, jak z Vision Pro dostat víc vizuální kvality bez toho, aby cena za výkon byla příliš vysoká. A právě to je u spatial computingu jeden z klíčových problémů.
Pokud vás téma zajímá víc, přečtěte si také Artemis II půjde pro Vision Pro vidět v Immersive Video. Start zachytí speciální Blackmagic kamera.
Podrobnosti přinesl také 9to5mac.
Chcete k tomu něco dodat? Napište krátce proč.