虛擬現(xiàn)實(shí)（MR， Mixed Reality）在沉浸式真實(shí)感混合現(xiàn)實(shí)領(lǐng)域發(fā)揮重要作用，它通過(guò)計(jì)算機(jī)技術(shù)將虛擬的信息疊加到現(xiàn)實(shí)中，實(shí)現(xiàn)內(nèi)容、空間幾何、時(shí)間、光照等多個(gè)層面的融合，提升人的感官體驗(yàn)。虛擬物品合成需要做到幾何和光照一致性，幾何一致性用以保證虛擬物體與真實(shí)世界保持空間幾何的一致，符合正確的透過(guò)關(guān)系、遮擋關(guān)系，光照一致性要求虛擬物品具有與真實(shí)場(chǎng)景相似的光照環(huán)境，產(chǎn)生正確的著色效果，并在真實(shí)場(chǎng)景中投下符合光照的陰影。

為了保證幾何一致性，利用三維掃描設(shè)備對(duì)室內(nèi)場(chǎng)景進(jìn)行三維重建，構(gòu)建以房源中心為原點(diǎn)的世界坐標(biāo)系，通過(guò)AI擺放技術(shù)在不同的房間擺放虛擬家具，將虛擬家具從模型坐標(biāo)系轉(zhuǎn)換到世界坐標(biāo)系下，結(jié)合室內(nèi)場(chǎng)景位置已知的相機(jī)，使得虛擬物品在場(chǎng)景中具有符合真實(shí)效果的尺度和透視關(guān)系。

室內(nèi)場(chǎng)景光源除了太陽(yáng)與天空光源外，還包括吸頂燈、射燈等燈人工光源，由于室內(nèi)場(chǎng)景墻面和門(mén)的遮擋關(guān)系使得光源的可見(jiàn)性更加復(fù)雜。為了保證光照一致性，我們利用不同位置采集的HDR全景圖和三維幾何信息，計(jì)算虛擬物品擺放位置處的精確局部光照，即IBL（Iamge based lighting）光照。

MR虛擬家具擺放效果如圖所示：