科技領(lǐng)域迎來(lái)一項(xiàng)突破性進(jìn)展,蘋(píng)果研究團(tuán)隊(duì)攜手香港大學(xué)推出名為L(zhǎng)GTM的新型渲染框架,為3D場(chǎng)景渲染技術(shù)開(kāi)辟了新路徑。該框架通過(guò)創(chuàng)新性地分離幾何結(jié)構(gòu)與表面紋理處理,實(shí)現(xiàn)了在保持幾何模型簡(jiǎn)潔性的同時(shí),生成接近4K分辨率的超高清畫(huà)面。
傳統(tǒng)渲染技術(shù)面臨的核心挑戰(zhàn)在于算力與分辨率的矛盾。以"前饋3D高斯?jié)姙R"技術(shù)為例,雖然能將2D圖像快速轉(zhuǎn)換為可多角度觀察的3D場(chǎng)景,但當(dāng)像素?cái)?shù)量突破臨界點(diǎn)時(shí),算力需求會(huì)呈指數(shù)級(jí)增長(zhǎng)。這種特性使得現(xiàn)有設(shè)備在處理高分辨率內(nèi)容時(shí),常常出現(xiàn)畫(huà)面卡頓或細(xì)節(jié)丟失的情況,嚴(yán)重制約了虛擬現(xiàn)實(shí)設(shè)備的用戶(hù)體驗(yàn)。
LGTM框架采用獨(dú)特的雙階段處理機(jī)制破解了這一難題。第一階段通過(guò)低分辨率圖像訓(xùn)練幾何模型,確保基礎(chǔ)結(jié)構(gòu)在2K至4K渲染時(shí)保持穩(wěn)定;第二階段則引入獨(dú)立網(wǎng)絡(luò)專(zhuān)注處理外觀細(xì)節(jié),將高精度紋理精準(zhǔn)疊加到幾何框架上。這種分工模式使系統(tǒng)能夠避開(kāi)全鏈路高負(fù)載運(yùn)算,在保證畫(huà)面質(zhì)量的同時(shí)顯著降低算力消耗。
這項(xiàng)技術(shù)對(duì)蘋(píng)果Vision Pro頭顯具有特殊意義。該設(shè)備雙眼屏幕總像素達(dá)2300萬(wàn),單眼分辨率超過(guò)4K電視標(biāo)準(zhǔn),現(xiàn)有渲染方案在此規(guī)格下極易出現(xiàn)性能瓶頸。LGTM框架的應(yīng)用有望消除畫(huà)面卡頓現(xiàn)象,使虛擬環(huán)境的紋理細(xì)節(jié)和文字清晰度接近真實(shí)世界水平,為用戶(hù)帶來(lái)前所未有的沉浸式體驗(yàn)。實(shí)際測(cè)試顯示,接入新框架后生成的3D場(chǎng)景,在視覺(jué)效果上已與原始圖像高度趨近。






















