愛伊米

AR 技術核心框架

本文為“AR邊緣雲技術”專題系列第2篇,本公眾號將繼續推出“AR邊緣雲技術”專題系列文章,與各位分享相關資訊,敬請持續關注!

作為人物互動(HTI)通道的核心技術體系,

AR

其實就是需要解決識別並跟蹤定位需要互動和已經關注的現實場景目標,並根據手勢或語音等互動方式完成意圖的傳遞,以最終實現結合現實場景目標資訊疊加的顯示。

隨著應用場景的進一步拓展,以及應用場合的不斷豐富,包括多人的長效體驗,AR 的核心技術體系,特別是考慮到雲端處理,也逐漸豐滿和清晰。

在垂直應用領域可以清晰可見的AR核心技術體系包括:

三維語義註冊

:對現實場景的語義和空間理解和重構 ;

三維融合生成

:完成結合現實場景的數字資訊生成和疊加 ;

人機實時互動技術

:使用者可與真實世界甚至虛擬物體進行實時的自然互動。

三維語義註冊:對現實場景的語義和間理解和重構

三維語義註冊

,包含了對於實景的三維結構恢復和重建,以及虛擬環境的實時三維註冊技術兩個部分。

其中三維結構的恢復和重建常常用來建立實景與觀察者視野(相機)的座標轉換關係,為虛擬物體與現實空間的三維註冊奠定基礎。

其包含了多檢視幾何原理的遵循,以及影象的特徵點的提取和匹配、運動恢復結構、三維幾何重建、表面紋理重建等核心技術。

近年日益普及的深度感測器對於高效和準確的完成三維重建存在積極作用,但感測器本身精度的差異化,以及當前技術所能達到的精度範圍,還需要探索有效方法以實現最終場景精確的稠密重建。

其中虛擬環境的三維註冊技術常常用來實現讓虛實環境共享同一空間座標系,以實現將虛擬景物嵌入其中的目的。

其包含了同時定位與地圖構建(SLAM),平面標誌物的檢測和識別與跟蹤,以及三維實物的檢測、識別與跟蹤等核心技術。

目前三維實物的跟蹤已逐步進入實用化的階段,但在工業界的大規模應用尚有距離。

三維融合生成:結合現實場景的數字資訊生成和疊加

三維融合生成

,包含了虛擬物體的繪製、現實環境的光照估計、虛實視覺融合和資訊與現實環境的融合顯示技術;同時空間增強實現技術也與其密切相關。

其中空間增強實現技術涉及空間增強實現的具體方式,包含光學穿透方式、以及光場方式和多投影呈現方式,同時也包括投影畫面的幾何校正和顏色校正技術等核心技術。

隨著 AR 服務從功能傾向逐步向體驗傾向的轉移,三維融合生成的技術重要性就顯得愈加重要,透過準確實現融合光源和周圍環境的虛擬數字化物件的形狀、位姿、材質和紋理,真實感將躍然眼前。

文章來源:物聯網報告中心