利用立體成像生成自由視點視頻制造技術(shù)

本發(fā)明專利技術(shù)公開了利用立體成像生成自由視點視頻。提供了用于利用主動紅外（IR）立體模塊生成自由視點視頻的方法和系統(tǒng)。該方法包括利用主動IR立體模塊計算（602）場景的深度圖?？梢酝ㄟ^下列步驟計算深度圖：將IR圓點圖樣投影到場景上；從兩個或更多個同步的IR攝像機中的每個IR攝像機捕獲立體圖像；檢測立體圖像內(nèi)的圓點；計算對應(yīng)于所述立體圖像中的圓點的特征描述符；計算所述立體圖像之間的視差圖；以及利用所述視差圖生成所述深度圖。該方法還包括利用所述深度圖生成（604）所述場景的點云，生成（606）所述點云的網(wǎng)格并從所述點云的所述網(wǎng)格生成（608）所述場景的投影紋理圖。該方法進一步包括利用所述投影紋理圖生成（610）所述場景的所述視頻。

【技術(shù)實現(xiàn)步驟摘要】

【技術(shù)保護點】
一種利用主動紅外（IR）立體模塊（146,702,704）生成視頻的方法，包括：利用所述主動IR立體模塊（146,702,704）計算（602）場景（708）的深度圖（112），其中計算所述深度圖（112）包括：將IR圓點圖樣（726）投影（302）到所述場景（708）上；從兩個或更多個同步的IR攝像機（144,710,712,714,716,718,720）中的每個IR攝像機捕獲（304）立體圖像；檢測（306）所述立體圖像內(nèi)的多個圓點；計算（308）對應(yīng)于所述立體圖像中的所述多個圓點的多個特征描述符；計算（310）所述立體圖像之間的視差圖；以及利用所述視差圖生成（312）所述場景（708）的深度圖（112）；利用所述深度圖（112）在三維空間中生成（604）所述場景（708）的點云（114）；生成（606）所述點云（114）的網(wǎng)格；從所述點云（114）的所述網(wǎng)格生成（608）所述場景（708）的投影紋理圖（116）；以及利用所述投影紋理圖（116）生成（610）所述場景（708）的所述視頻。

【技術(shù)特征摘要】
...

【專利技術(shù)屬性】
技術(shù)研發(fā)人員：查爾斯·日特尼克，辛·秉·康，亞當(dāng)·柯克，帕特里克·斯威尼，阿米特·米塔爾，大衛(wèi)·哈尼特，大衛(wèi)·埃雷克，干尚·米特拉，克斯圖提斯·帕蒂耶尤納斯，亞龍·埃謝，西蒙·溫德，
申請(專利權(quán))人：微軟公司，
類型：發(fā)明
國別省市：