蘋果研究團(tuán)隊(duì)與香港大學(xué)聯(lián)合推出了一項(xiàng)名為LGTM的全新3D渲染框架,旨在突破當(dāng)前高分辨率3D場景渲染的技術(shù)瓶頸。這項(xiàng)名為"Less Gaussians, Texture More"的技術(shù)通過創(chuàng)新性的解耦設(shè)計(jì),將幾何結(jié)構(gòu)與表面紋理分離處理,為虛擬現(xiàn)實(shí)設(shè)備帶來革命性畫質(zhì)提升。
傳統(tǒng)3D渲染技術(shù)面臨算力與畫質(zhì)的矛盾困境。以"前饋3D高斯?jié)姙R"為代表的現(xiàn)有方案,雖能快速將2D圖像轉(zhuǎn)化為3D場景,但在處理4K及以上分辨率時(shí),算力需求會(huì)隨像素?cái)?shù)量呈指數(shù)級增長。這種特性導(dǎo)致高端設(shè)備在渲染復(fù)雜場景時(shí)仍會(huì)出現(xiàn)卡頓,嚴(yán)重影響用戶體驗(yàn)。
LGTM框架采用獨(dú)特的雙階段處理機(jī)制:首先通過低分辨率圖像構(gòu)建精確的幾何框架,確保2K/4K渲染時(shí)的結(jié)構(gòu)穩(wěn)定性;隨后運(yùn)用獨(dú)立神經(jīng)網(wǎng)絡(luò)處理高分辨率紋理映射,將細(xì)節(jié)表現(xiàn)與幾何計(jì)算分離。這種分工策略使系統(tǒng)在保持幾何簡潔性的同時(shí),實(shí)現(xiàn)紋理細(xì)節(jié)的極致還原,算力消耗較傳統(tǒng)方法降低60%以上。
蘋果Vision Pro頭顯成為這項(xiàng)技術(shù)的首要受益者。該設(shè)備雙眼總像素達(dá)2300萬,單眼分辨率超過4K電視標(biāo)準(zhǔn),對渲染技術(shù)提出嚴(yán)苛要求。現(xiàn)有方案在此類設(shè)備上運(yùn)行時(shí),常因性能不足導(dǎo)致畫面模糊或延遲。LGTM框架的引入,有望徹底解決高分辨率下的渲染瓶頸,為用戶帶來真正流暢的沉浸式體驗(yàn)。
實(shí)際測試數(shù)據(jù)顯示,采用LGTM框架渲染的3D場景,在紋理細(xì)節(jié)和文字清晰度方面均有質(zhì)的飛躍。在4K分辨率下,虛擬物體的表面質(zhì)感與真實(shí)物體幾乎難以區(qū)分,文字邊緣銳利度提升3倍以上。這種突破性進(jìn)展意味著,未來用戶通過頭顯觀察虛擬環(huán)境時(shí),將獲得接近人眼分辨極限的視覺體驗(yàn),為混合現(xiàn)實(shí)應(yīng)用開辟全新可能。















