Shap・E 并不僅僅只是一個(gè) 3D 模型生成器,而且可以直接生成隱式函數(shù)(implicit functions)的參數(shù),而這些參數(shù)可以渲染紋理網(wǎng)格(textured meshes)和神經(jīng)輻射場(chǎng)(NeRF)。
這意味著 Shap・E 和當(dāng)前僅輸出點(diǎn)云(point clouds)或體素(voxels)的模型不同,可以生成具有細(xì)粒度紋理和復(fù)雜形狀的高質(zhì)量 3D 資產(chǎn)。
OpenAI 展示了 Shap・E 的結(jié)果,例如一碗食物,一只企鵝,一只體素化的狗,一個(gè)篝火,一把鱷梨形的椅子等。整個(gè)圖片可以在幾秒內(nèi)完成渲染。
相關(guān)名詞解釋如下:
神經(jīng)輻射場(chǎng)(NeRF):
神經(jīng)輻射場(chǎng)(Neural Radiance Field, NeRF)作為一種具有隱式場(chǎng)景表示的新型視場(chǎng)合成技術(shù),在計(jì)算機(jī)視覺領(lǐng)域引起了廣泛的關(guān)注。
作為一種新穎的視圖合成和三維重建方法,NeRF 模型在機(jī)器人、城市地圖、自主導(dǎo)航、虛擬現(xiàn)實(shí) / 增強(qiáng)現(xiàn)實(shí)等領(lǐng)域都有廣泛的應(yīng)用。
點(diǎn)云(point clouds):
云點(diǎn)是一系列落在三維坐標(biāo)系統(tǒng)里的點(diǎn),他們可以在建筑表面或建筑外立面展開,以捕捉建筑外觀的形態(tài)。
體素(voxels)
體素是 3D 空間的像素。量化的,大小固定的點(diǎn)云。每個(gè)單元都是固定大小和離散坐標(biāo)。