虛擬現(xiàn)實與增強現(xiàn)實跟蹤技術.ppt

《虛擬現(xiàn)實與增強現(xiàn)實跟蹤技術.ppt》由會員分享，可在線閱讀，更多相關《虛擬現(xiàn)實與增強現(xiàn)實跟蹤技術.ppt（82頁珍藏版）》請在裝配圖網(wǎng)上搜索。

一 概述二 三自由度地磁定姿系統(tǒng)三 六自由度電磁跟蹤系統(tǒng)四 手指彎曲測量系統(tǒng)五 戶外增強現(xiàn)實系統(tǒng)關鍵技術六 總結 目錄 一 概述 虛擬現(xiàn)實系統(tǒng)虛擬現(xiàn)實是 一種利用計算機圖形技術創(chuàng)建的真實世界的仿真環(huán)境 而且這一由計算機合成的世界不是靜態(tài)的 是依用戶輸入而變化的 用戶的輸入方式可以包括手勢 命令語言等 一 概述 增強現(xiàn)實系統(tǒng)增強現(xiàn)實技術是虛擬現(xiàn)實技術發(fā)展的一個重要分支 借助光電顯示技術 交互技術 計算機圖形技術和可視化技術產(chǎn)生現(xiàn)實環(huán)境中不存在的虛擬對象 并通過傳感技術將虛擬對象準確 放置 在真實環(huán)境中 借助顯示設備將虛擬對象與真實環(huán)境融為一體 一 概述 虛擬現(xiàn)實系統(tǒng)的特征虛擬現(xiàn)實系統(tǒng)是一種由計算機和電子技術創(chuàng)造的具有浸沒感的高級人機界面 用戶能夠通過各種傳感設備使用人的各種自然技能對虛擬世界中的物體進行考察或操作 浸沒感參與者有身臨其境的真實感覺 交互性可以通過虛擬現(xiàn)實系統(tǒng)中的交互接口設備以自然交互方式與虛擬現(xiàn)實環(huán)境進行交互操作 一 概述 虛擬現(xiàn)實系統(tǒng)的構成 一 概述 虛擬現(xiàn)實技術的應用虛擬現(xiàn)實系統(tǒng)能夠提供一種與以往所有的傳統(tǒng)技術不同的觀點 第一人稱觀點 用戶將會沉浸在計算機生成的虛擬環(huán)境中去 而且還可以與其中的物體進行交互 在虛擬環(huán)境中 操作者可以利用天生的空間感來理解所看到的事物 計劃所要做的事情 主要應用領域為 軍事模擬訓練制造和設計醫(yī)學科學計算可視化娛樂業(yè) 一 概述 增強現(xiàn)實系統(tǒng)特征增強現(xiàn)實系統(tǒng)把計算機生成的虛擬物體 文字和圖形等信息重疊顯示在用戶所看到的真實物體之上 頭盔顯示器和方位跟蹤器是必不可少的外設 其頭盔顯示器是透視式的 一 概述 增強現(xiàn)實與虛擬現(xiàn)實系統(tǒng)的區(qū)別所使用的顯示設備不同虛擬現(xiàn)實系統(tǒng)使用浸沒式頭盔顯示器或立體投影設備 增強現(xiàn)實系統(tǒng)使用透視式顯示設備 跟蹤注冊涵義和精度要求不同 虛擬現(xiàn)實系統(tǒng)中注冊指呈現(xiàn)給用戶的虛擬環(huán)境與用戶的各種感官匹配 增強現(xiàn)實系統(tǒng)中注冊指將計算機產(chǎn)生的虛擬物體與用戶周圍的真實環(huán)境全方位對準 對虛擬環(huán)境的生成能力的要求不同增強現(xiàn)實系統(tǒng)可以緩解虛擬現(xiàn)實系統(tǒng)建立逼真的虛擬環(huán)境時對系統(tǒng)計算能力的苛刻要求 一 概述 增強現(xiàn)實系統(tǒng)應用增強現(xiàn)實系統(tǒng)并非以虛擬世界代替真實世界 而是利用附加信息去增強使用者對真實世界的感官認識 由于真實環(huán)境的存在能夠使用戶對周圍環(huán)境的感知更具真實感 其主要應用領域為 醫(yī)療研究裝配 維修與教育培訓娛樂及室內裝飾設計軍事應用視頻轉播 一 概述 虛擬現(xiàn)實系統(tǒng)的國外進展美國從六十年代即開始著手進行虛擬現(xiàn)實的研究工作 并且一直受到美國國防部的重視 英國正在利用虛擬現(xiàn)實技術進行高級戰(zhàn)斗機座艙設計 歐洲航天局已制定了一項 人在虛擬現(xiàn)實空間 的研究計劃 澳大利亞國防軍開始實施代號為 溫杜拉工程 的十年計劃以訓練未來的士兵 該計劃的核心就是利用虛擬現(xiàn)實系統(tǒng)進行軍事訓練 虛擬現(xiàn)實游戲和加強人機接口能力是日本在虛擬現(xiàn)實方面的兩個主要研究方向 尤其在游戲方面占有重要的市場地位 一 概述 人機交互商用裝置 三自由度 六自由度跟蹤器 一 概述 人機交互商用裝置 手指彎曲測量系統(tǒng) 一 概述 虛擬現(xiàn)實系統(tǒng)國內研究現(xiàn)狀清華大學計算機系智能技術與系統(tǒng)實驗室在臨界場感技術等領域進行了卓有成效的研究 北京科技大學虛擬現(xiàn)實實驗室開發(fā)出了純交互式汽車模擬駕駛培訓系統(tǒng) 北京航空航天大學虛擬現(xiàn)實與多媒體研究室已經(jīng)在DVENET上開發(fā)了直升機虛擬仿真器 坦克虛擬仿真器 虛擬戰(zhàn)場環(huán)境觀察器 計算機兵力生成器 空軍第二航空學院研制了我國第一套自行研制并接近實用化的VR系統(tǒng) 浙江大學開發(fā)了數(shù)字故宮 數(shù)字敦煌等虛擬現(xiàn)實應用系統(tǒng) 一 概述二 三自由度地磁定姿系統(tǒng)三 六自由度電磁跟蹤系統(tǒng)四 手指彎曲測量系統(tǒng)五 戶外增強現(xiàn)實系統(tǒng)關鍵技術六 總結 目錄 二 三自由度地磁定姿系統(tǒng) 概述在虛擬現(xiàn)實系統(tǒng)中頭盔顯示器給用戶提供一種沉浸在虛擬環(huán)境中的浸沒感 計算機必須連續(xù)地獲得用戶頭部的精確姿態(tài)信息并實時地調整顯示的圖像 實現(xiàn)姿態(tài)測量的裝置為三自由度定姿系統(tǒng) 二 三自由度地磁定姿系統(tǒng) 概述在地面上標定方向的基準是地球自轉軸 基于感受地球自轉角速度的定向儀表如陀螺羅經(jīng) 陀螺經(jīng)緯儀 指北陀螺系統(tǒng)和速率陀螺等 不僅技術復雜 造價昂貴 維護困難和體積龐大 而且啟動時間長 地球自身固有的可做方位基準的矢量除了地球自轉角速度矢量以外 只有地磁場強度 研制了一種采用加速度計 磁阻傳感器和單片機的數(shù)字地磁定姿系統(tǒng)及其定姿算法 通過測量地球的重力場及磁場來計算運動物體的三自由度姿態(tài)數(shù)據(jù) 由于采用全固態(tài)傳感器 該套系統(tǒng)具有精度高 性能穩(wěn)定 體積小 價格低廉 功耗低的特點 二 三自由度地磁定姿系統(tǒng) 地磁定姿原理地磁場的強度大約為0 5Gauss 其水平分量與地球表面平行 指向地磁北極 二 三自由度地磁定姿系統(tǒng) 地磁定姿原理目前通過羅盤確定姿態(tài)的方法均為首先確定地磁場的水平分量HX和HY 根據(jù)HX和HY的測量值確定與地磁北極的夾角 然后在計算結果中加入地磁偏角來找到真北 二 三自由度地磁定姿系統(tǒng) 姿態(tài)角測量算法在剛體動力學中運動物體的姿態(tài) 即運動物體在參考空間中的方位 通過與運動物體相固結的運動參考坐標系和定參考坐標系之間的夾角表示 二 三自由度地磁定姿系統(tǒng) 姿態(tài)角測量算法運動物體處于水平狀態(tài)下姿態(tài)角的測量算法 運動物體處于傾斜狀態(tài)下姿態(tài)角的測量算法 二 三自由度地磁定姿系統(tǒng) 環(huán)境磁場的影響及補償算法由于定姿系統(tǒng)是通過測量地磁場的三軸分量來確定被跟蹤物體的姿態(tài)的 因此被跟蹤物體附近的永磁體或及帶電導線所產(chǎn)生的環(huán)境磁場將影響系統(tǒng)的測量精度 二 三自由度地磁定姿系統(tǒng) 磁傳感器概述磁傳感器是一種將磁場或磁感應強度等物理量轉換成電信號的磁電轉換元器件或裝置 大部分磁傳感器是基于固體材料的磁電效應的傳感器 其中主要是半導體材料 二 三自由度地磁定姿系統(tǒng) 磁阻傳感器信號處理電路 信號放大與濾波 二 三自由度地磁定姿系統(tǒng) 磁阻傳感器信號處理電路 置位 復位電路 二 三自由度地磁定姿系統(tǒng) 加速度傳感器概述壓電式加速度傳感器具有很寬的頻率響應范圍 適用于高頻范圍的振動測量和沖擊測量 壓阻式加速度傳感器能測量頻率低到零的加速度信號 輸出阻抗很低 內在噪聲小 但響應速度較慢 變電容式加速度傳感器具有穩(wěn)態(tài)響應 高靈敏度 低輸出阻抗 高線性度 抗過載能力高 體積小 重量輕 響應快等不可多得的優(yōu)點 二 三自由度地磁定姿系統(tǒng) ADXL202加速度傳感器 二 三自由度地磁定姿系統(tǒng) PIC16F877單片機高性能精簡指令集RISCCPU 一共只有35條單字指令 除了程序分支是雙周期指令外 其它所有的指令都是單周期指令 工作速度高 高達20MHz時鐘輸入和200ns指令周期 高達8K字 14位字長 的FLASH程序存儲器 高達368字節(jié)的數(shù)據(jù)存儲器 RAM 和高達256字節(jié)的EEPROM數(shù)據(jù)存儲器 中斷能力強 多達14個內部 外部中斷源 8級硬件堆棧 直接 間接和相對尋址方式 高速 低功耗CMOSFLASH EEPROM技術 僅通過兩個引腳即可實現(xiàn)程序在線串行編程ICSP 編程只需要5V電壓 寬范圍的工作電壓 2 0 5 5V 功耗低 二 三自由度地磁定姿系統(tǒng) 實際定姿系統(tǒng) 二 三自由度地磁定姿系統(tǒng) 定姿系統(tǒng)標定方法繞三個坐標軸的旋轉方向上分別找出加速度計輸出的最大值MAXGi及最小值MINGi和磁阻傳感器數(shù)據(jù)輸出的最大值MAXHi及最小值MINHi 2 22 2 23 2 24 二 三自由度地磁定姿系統(tǒng) 頭部姿態(tài)變化跟蹤 二 三自由度地磁定姿系統(tǒng) 定姿系統(tǒng)誤差分析 Hmin 0 8G 2048 0 39mG A D轉換誤差 磁阻傳感器誤差在磁阻傳感器的性能參數(shù)中 影響測量精度的因素除最小可測磁場之外 還包括傳感器的噪聲 線性度和重復性等 總的影響為0 14度 環(huán)境溫度變化的影響傳感器的溫度系數(shù)影響航向角的測量精度 溫度影響主要包括零偏的溫漂和靈敏度的溫漂 為了克服溫度漂移的影響 在環(huán)境溫度變化較大的應用場合我們采用了置位 復位技術 二 三自由度地磁定姿系統(tǒng) 定姿系統(tǒng)誤差分析 地磁偏角的影響地磁偏角的數(shù)值與地理位置有關 最大可能達到25度 傾斜角測量誤差的影響傾斜角對航向測量誤差的影響與定姿系統(tǒng)所處的地理位置有關 二 三自由度地磁定姿系統(tǒng) 定姿系統(tǒng)誤差分析 一 概述二 三自由度地磁定姿系統(tǒng)三 六自由度電磁跟蹤系統(tǒng)四 手指彎曲測量系統(tǒng)五 戶外增強現(xiàn)實系統(tǒng)關鍵技術六 總結 目錄 三 六自由度電磁跟蹤系統(tǒng) 概述 在虛擬現(xiàn)實和增強現(xiàn)實系統(tǒng)中 除了運動物體的三自由度姿態(tài)信息之外 在很多情況下還需要跟蹤運動物體的空間方位信息 能夠同時跟蹤位置和姿態(tài)的跟蹤器被稱為六自由度跟蹤器 在三維空間內一個物體的空間位置由笛卡爾坐標 即X Y Z坐標值 來確定 姿態(tài)由另外三個參數(shù)俯仰角 橫滾角及航向角來確定 因此用于虛擬現(xiàn)實和增強現(xiàn)實系統(tǒng)的方位跟蹤器至少需要獲得6個自由度信息 即三個平移自由度和三個旋轉自由度 三 六自由度電磁跟蹤系統(tǒng) 六自由度跟蹤器分類 電磁式跟蹤系統(tǒng)根據(jù)磁發(fā)射信號和磁感應信號之間的耦合關系確定被測對象的方位 環(huán)境中的金屬物體 電子設備 CRT及環(huán)境磁場會對接收裝置造成干擾 光學式跟蹤系統(tǒng)采用攝像裝置或光敏器件接收具有一定幾何分布的光源所發(fā)出的光 通過接收的圖像及光源和傳感器的空間位置來計算運動物體的6自由度信息 在近距離內非常精確且不受磁場和聲場的干擾 但要求光源與探測器可視 跟蹤的角度范圍有限并且現(xiàn)場其它光源會造成影響 機械式跟蹤系統(tǒng)是一種絕對位置傳感器 通過機械關節(jié)的物理連接來測量運動物體的位置及方向 機械裝置笨重 操作不便且易對操作者產(chǎn)生干擾 跟蹤范圍有限 三 六自由度電磁跟蹤系統(tǒng) 六自由度跟蹤器分類 超聲波式跟蹤系統(tǒng)利用不同聲源發(fā)出的超聲波到達某一特定地點的時間差 相位差或者聲壓差進行定位跟蹤 包括連續(xù)波相位相干測量法和脈沖波傳播時間測量法兩種方式 不受環(huán)境磁場及鐵磁物體的影響 同時不產(chǎn)生電磁輻射 價格便宜 但跟蹤范圍有限 受環(huán)境聲場干擾 與空氣濕度有關并且要求發(fā)射器與接收器之間不能有物體遮擋 慣性跟蹤系統(tǒng)慣性跟蹤器利用陀螺測量三個轉動自由度的角度變化 利用加速度計測量三個平動自由度的位移 體積大 價格昂貴 由于角度和距離的測量分別通過對陀螺和加速度計的一次和兩次積分得到 系統(tǒng)誤差會隨著時間積累 三 六自由度電磁跟蹤系統(tǒng) 電磁式跟蹤系統(tǒng) 當給一個線圈中通上電流后 在線圈的周圍將產(chǎn)生磁場 磁傳感器的輸出值與發(fā)射線圈和接收器之間的距離r及磁傳感器的敏感軸與發(fā)射線圈發(fā)射軸之間的夾角有關 三 六自由度電磁跟蹤系統(tǒng) 直流式電磁跟蹤系統(tǒng) 直流式電磁跟蹤系統(tǒng)主要由發(fā)射源 接收器和控制系統(tǒng)構成 三 六自由度電磁跟蹤系統(tǒng) 直流式電磁跟蹤系統(tǒng)位置測量算法 三 六自由度電磁跟蹤系統(tǒng) 直流式電磁跟蹤系統(tǒng)位置測量算法 三 六自由度電磁跟蹤系統(tǒng) 直流式電磁跟蹤系統(tǒng)位置測量算法 三 六自由度電磁跟蹤系統(tǒng) 直流式電磁跟蹤系統(tǒng)位置測量算法 三 六自由度電磁跟蹤系統(tǒng) 直流式電磁跟蹤系統(tǒng)的不足 在使用過程中的環(huán)境干擾大多為直流信號 采用常規(guī)的信號處理手段 如濾波 無法濾除 由于系統(tǒng)更新頻率僅為30Hz 無法迅速跟蹤干擾的變化 功率譜密度與頻率成反比的隨機漲落現(xiàn)象在電子器件中普遍存在 因此低頻噪聲會影響放大及信號處理系統(tǒng)的性能 由于在接收端磁場的強度與接收器和發(fā)射線圈之間的距離的立方成反比 因此接收端的磁場強度隨距離增大衰減很快 三 六自由度電磁跟蹤系統(tǒng) 交流式電磁跟蹤系統(tǒng) 為了彌補直流式跟蹤系統(tǒng)的不足 提出了一種采用交流磁場作激勵源的交流式電磁跟蹤系統(tǒng)方案 三 六自由度電磁跟蹤系統(tǒng) 交流式電磁跟蹤系統(tǒng) 三 六自由度電磁跟蹤系統(tǒng) 數(shù)字相敏檢波器算法 3 39 3 44 三 六自由度電磁跟蹤系統(tǒng) 數(shù)字相敏檢波器算法 三 六自由度電磁跟蹤系統(tǒng) 交流式電磁跟蹤系統(tǒng)跟蹤算法 三 六自由度電磁跟蹤系統(tǒng) 誤差分析及仿真結果 三 六自由度電磁跟蹤系統(tǒng) 實驗系統(tǒng)結構 高穩(wěn)定度振蕩源功率放大電路發(fā)射線圈接收器信號處理電路 一 概述二 三自由度地磁定姿系統(tǒng)三 六自由度電磁跟蹤系統(tǒng)四 手指彎曲測量系統(tǒng)五 戶外增強現(xiàn)實系統(tǒng)關鍵技術六 總結 目錄 四 手指彎曲測量系統(tǒng) 概述 人手在人類的日常生活中起著不可替代的作用 是人們與外界進行物理接觸及意識表達的主要媒介 在虛擬現(xiàn)實系統(tǒng)中采用手勢辨識作為人機交互手段的方法被普遍采用 在采用人手的動作來作人機交互的虛擬現(xiàn)實系統(tǒng)中仍然需要通過數(shù)據(jù)手套等輸入裝置來測量手指彎曲的角度和手指的外展程度等額外的信息 手套比起傳統(tǒng)的鼠標來 交互的區(qū)域更大 手的運動更自由 四 手指彎曲測量系統(tǒng) 測量手指彎曲角度的方法 光纖彎曲傳感器具有體積小和重量輕的優(yōu)點 而且用戶戴上這種手套感覺舒適 不會限制用戶手部的運動 變電阻式線性傳感器由于這種數(shù)據(jù)手套是松耦合的 因此輸出不互相依賴 該類手套的價格十分昂貴 金屬外骨架裝置由于這種裝置在手上的位置會滑動 所以在每次模擬開始時都要進行校準 另外該類手套較重 易使手感到疲勞 基于圖像處理的手指彎曲傳感技術對硬件系統(tǒng)要求高 計算量大 四 手指彎曲測量系統(tǒng) 測量原理 在采用光導纖維傳感器的手指測量系統(tǒng)中 將光導纖維縫制在手套中 當手指彎曲而導致光導纖維彎曲時 通過光纖傳輸?shù)墓饽芰繉兴p 光能衰減的程度與光纖的彎曲程度有關 四 手指彎曲測量系統(tǒng) 光纖傳感器設計 光纖傳感器由發(fā)光二極管 塑料光纖和光敏三極管構成 把發(fā)光二極管和光敏三極管的斷面鉆出與光纖直徑相等的孔洞 然后將光纖的端面插入孔洞并采用502膠粘結 采用這種方法即可以提高耦合效率 又可以保證耦合的可靠性 在粘結前對光纖表面需要進行研磨處理 圖4 6光纖彎曲傳感器電路 四 手指彎曲測量系統(tǒng) 實驗結果 系統(tǒng)采用PIC16F877單片機作A D轉換及數(shù)據(jù)處理 采用2252雙集成運放作傳感器信號的放大和濾波 一 概述二 三自由度地磁定姿系統(tǒng)三 六自由度電磁跟蹤系統(tǒng)四 手指彎曲測量系統(tǒng)五 戶外增強現(xiàn)實系統(tǒng)關鍵技術六 總結 目錄 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 概述 增強現(xiàn)實系統(tǒng)借助光電顯示技術 交互技術 計算機圖形技術和可視化技術等產(chǎn)生現(xiàn)實環(huán)境中不存在的虛擬對象 并通過傳感技術將虛擬對象準確地 放置 在真實環(huán)境中 利用顯示設備將產(chǎn)生的虛擬對象與真實環(huán)境融為一體 呈現(xiàn)給用戶一個感官效果真實的新環(huán)境 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 概述 構造一個成功的增強現(xiàn)實系統(tǒng)的技術關鍵是進行精確的三維跟蹤注冊 從而可以將真實場景與虛擬增強信息互相融合 在增強現(xiàn)實系統(tǒng)中所采用的跟蹤器主要包括磁跟蹤器 光學跟蹤器 超聲波跟蹤器 機械式跟蹤器和慣性跟蹤器等 用以探測和跟蹤真實環(huán)境中目標的位置和方向 由于在增強現(xiàn)實系統(tǒng)中需要將虛擬物體與真實世界精確對準 采用單一的跟蹤技術難以獲得滿意的跟蹤效果 為了彌補各跟蹤器的缺點 許多研究者采用混合跟蹤的方法取長補短 以滿足增強現(xiàn)實系統(tǒng)高精度注冊的要求 在基于視覺的跟蹤系統(tǒng)中 使用標定的攝像機利用單幅圖像中已知點的坐標實現(xiàn)三維跟蹤注冊為最為常用的方法 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)概述 增強現(xiàn)實技術仍然處于實驗室階段 已開發(fā)的注冊技術均需要在環(huán)境可控的條件下才可以獲取精確的跟蹤結果 構建一套實用的增強現(xiàn)實系統(tǒng)需要做很多測量及標定的準備工作 從而限制了增強現(xiàn)實系統(tǒng)的推廣應用 如果不需要事先做大量的準備工作即可以獲得在室外或不可控的環(huán)境中的精確跟蹤 將大大地減少增強現(xiàn)實系統(tǒng)操作的復雜度及擴大增強現(xiàn)實系統(tǒng)的應用范圍 在這方面的研究工作的最終目標是在任意條件下及環(huán)境中均可以獲得準確可靠的跟蹤及注冊 研制戶外用便攜式個人增強現(xiàn)實系統(tǒng)是近年來增強現(xiàn)實技術方面的一個重要的研究方向 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)與室內增強現(xiàn)實系統(tǒng)的區(qū)別 對系統(tǒng)硬件的要求不同工作環(huán)境不同對顯示器的要求不同可使用的跟蹤技術不同可利用的資源不同 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)關鍵技術 傳感器技術 全球定位系統(tǒng) GPS 慣性導航系統(tǒng)主動式 電磁式 光學式或超聲波式 被動光學式羅盤及傾斜傳感器 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)關鍵技術 頭盔顯示器技術 為了解決光學透視式頭盔虛擬物體無法遮擋真實世界中的物體的問題 解決方案是在光學組合器和真實世界之間加入液晶光閥 可以在選定的像素點上阻礙外部世界的圖像 系統(tǒng)產(chǎn)生的圖像處于固定焦距的位置 一般為幾英尺 解決這一問題的方法是開發(fā)自動變焦系統(tǒng) 正在開發(fā)的一個系統(tǒng)可以在0 3秒之內將焦距由0 25米變至無窮遠處 已有的頭盔顯示器尚不能滿足戶外增強現(xiàn)實系統(tǒng)的要求 顯示的亮度不夠 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)關鍵技術 便攜計算機技術 戶外增強現(xiàn)實系統(tǒng)必須要由操作者攜帶 需要控制計算機系統(tǒng)的重量 功耗和體積 筆記本電腦均只有一個CPU 限制了系統(tǒng)的計算能力 特別是在視覺跟蹤或混合跟蹤的情況下會影響跟蹤系統(tǒng)的性能 目前的操作系統(tǒng)不是為實時計算開發(fā)的 而專用的實時操作系統(tǒng)又沒有支持傳感器和圖像的驅動 解決方案是由遠程服務器進行復雜的計算 從而減輕用戶所必須攜帶的重量 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)目前進展 第一套已知的戶外增強現(xiàn)實系統(tǒng)是哥倫比亞大學Feiner研究小組研制的校園漫游機 借助該套系統(tǒng)用戶可以看到校園中特定建筑的相關信息 部門或者建筑物名稱 該套系統(tǒng)采用無源傳感器 包括羅盤及傾斜傳感器 及差分GPS 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)目前進展 南澳大利亞大學正在開發(fā)的戶外增強現(xiàn)實系統(tǒng)可以讓戶外用戶看到虛擬軍事仿真器中存在的物體 系統(tǒng)包括筆記本電腦 TCM2 80羅盤 帶有差分的GarminGPS12XL等 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)目前進展 希臘多家研究機構和政府部門聯(lián)合成立的研究小組正在進行古跡導游 Archeoguide 項目的開發(fā) 研制可以為游客提供希臘奧林匹亞歷史古跡信息的可穿戴式增強現(xiàn)實系統(tǒng) 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)目前進展 美國NRL海軍研究試驗室正在開發(fā)戰(zhàn)場用增強現(xiàn)實系統(tǒng) BARS 其目的在于為城市戰(zhàn)場環(huán)境中的指揮官和士兵之間傳達三維戰(zhàn)術信息提供一個實用平臺 主要研究內容包括 設計新型用戶接口 設計新型交互方法 開發(fā)交互式 分布式三維環(huán)境及足夠精度的跟蹤和注冊系統(tǒng) 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)應用 開發(fā)工作于室外的增強現(xiàn)實系統(tǒng)將大大的擴展其應用范圍 同時可以提供新的 更通用的跟蹤方法 還可以減少使用前的準備工作 使得建立和操作一套增強現(xiàn)實系統(tǒng)更加容易 同時為可穿戴式計算機提供了一個自然的人機交互手段 一些可穿戴式計算機例如CMUVuMan系統(tǒng)已經(jīng)用于戶外車輛維修的應用中 對于森林中的徒步旅行者 戰(zhàn)場中的戰(zhàn)士及開車的司機來說 戶外增強現(xiàn)實系統(tǒng)可以提高他們對環(huán)境的認識 提供導航路徑等信息 用戶可以在看到周圍環(huán)境的同時看到分布在空間的信息 士兵可以看到敵人的位置 戰(zhàn)友 類似雷區(qū)等肉眼無法識別的危險區(qū)域等 室外增強現(xiàn)實系統(tǒng)也可以用于團隊協(xié)作 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 戶外增強現(xiàn)實系統(tǒng)應用 戶外增強現(xiàn)實系統(tǒng)的另外一個應用是看到過去或未來的人物或事件 裝配有戶外增強現(xiàn)實系統(tǒng)的游客可以看到計算機所產(chǎn)生的復活的歷史 頭盔式顯示器可以遮擋背景中的現(xiàn)代建筑物或紀念碑 顯示文物古跡在當時的情況 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 增強現(xiàn)實系統(tǒng)需要實現(xiàn)的功能 真實與虛擬場景間的精確注冊增強場景的一定刷新率圖像的立體顯示系統(tǒng)的初始標定注冊和圖像生成的實時性 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 基于視覺的跟蹤注冊算法 在增強現(xiàn)實系統(tǒng)中主要包括三個坐標系間的轉換 世界坐標系 攝像機坐標系和像面坐標系 跟蹤系統(tǒng)包括一臺彩色CCD攝像機和四個不同顏色的彩色標志點 彩色標志點的屏幕坐標可以通過對輸入視頻流的濾波得到 當所有4個標志點都被跟蹤到之后 利用投影變換關系可以唯一地確定平移矩陣T和旋轉矩陣R 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 基于視覺的跟蹤注冊算法誤差分析 實際的測量結果表明在使用該算法時旋轉角的計算值最大可能有4 5o的誤差 旋轉矩陣元素r3的 0 015037的微小誤差會帶來俯仰角計算值1o的誤差 當所跟蹤的標志點中心的坐標是 385 381 同時由于環(huán)境光照的變化每個坐標值都有一個像素的偏差 圖像處理的輸出為 384 380 對應的計算誤差為0 093855 此時俯仰角的計算誤差為5 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 基于混合跟蹤的增強現(xiàn)實系統(tǒng) 包括固定于V8頭戴式顯示器的磁傳感器和CCD攝像機 CCD攝像機的輸出通過大恒DH 200圖像A D轉換卡被轉換為數(shù)字視頻信號 三自由度定姿系統(tǒng)與工作站之間通過RS232通信 攝像機的位置和姿態(tài)通過結合視頻跟蹤和磁跟蹤的結果來獲得 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 混合跟蹤算法 當由于環(huán)境光照的影響導致一個或者多個標志點不能被跟蹤到時 所提取到的標志點的數(shù)量不足以用來計算被跟蹤物體的位置和姿態(tài)信息 在通過磁跟蹤器的輸出獲得被跟蹤物體的姿態(tài)信息之后 僅通過兩個標志點的跟蹤結果即可以獲得位置跟蹤的結果 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 應用于增強現(xiàn)實系統(tǒng)的混合跟蹤裝置 系統(tǒng)包括V8頭盔顯示器 CCD攝像機 地磁姿態(tài)跟蹤系統(tǒng)和計算機等 五 戶外增強現(xiàn)實系統(tǒng)關鍵技術 跟蹤結果 一 概述二 三自由度地磁定姿系統(tǒng)三 六自由度電磁跟蹤系統(tǒng)四 手指彎曲測量系統(tǒng)五 戶外增強現(xiàn)實系統(tǒng)關鍵技術六 總結 目錄 六 總結 存在的問題 現(xiàn)有的數(shù)據(jù)手套產(chǎn)品出現(xiàn)的時間都不長 僅能夠允許用戶采用自然手勢與虛擬環(huán)境進行有限的交互 存在手指關節(jié)角度的分辨率有限及不同手勢之間的辨識困難等不足 手套式手部跟蹤系統(tǒng)的另一個缺點是配帶手套以及較多的信號線給虛擬交互帶來不便 并在一定程度上影響沉浸感 我們所研制的光纖傳感器手指彎曲測量系統(tǒng)雖然有輕便 靈敏度高 抗干擾能力強的優(yōu)點 但它不能對每一個指關節(jié)的彎曲角度進行準確的跟蹤 只能測量整個手指彎曲的角度的總和 而且它還存在著容易損壞等缺點 六 總結 存在的問題 現(xiàn)有的六自由度跟蹤器的主要問題是響應速度慢 工作范圍有限 易受環(huán)境干擾 迄今為止尚未開發(fā)出可以應用于噪聲及未知環(huán)境中的低延遲 高精度系統(tǒng) 本研究報告所提出的三自由度地磁姿態(tài)跟蹤系統(tǒng)和六自由度電磁跟蹤系統(tǒng)器都是由計算機根據(jù)系統(tǒng)的采樣值來計算手部的空間位置及姿態(tài) 因此不可避免的要帶來延遲 目前進行校正處理的一般思路是首先建立被測對象的實際方位信息和測得方位信息的對照表 之后在實際跟蹤過程中根據(jù)實測的方位數(shù)據(jù)利用上述對照表最終計算出校正后的結果 六 總結 結束語 作為虛擬現(xiàn)實系統(tǒng)和增強現(xiàn)實系統(tǒng)核心技術的跟蹤注冊技術 目前在跟蹤的精度與跟蹤范圍方面尚存在差距 在使用壽命 可靠性 體積 功耗和抗干擾能力方面還有待于進一步提高 在一定程度上限制了虛擬現(xiàn)實和增強現(xiàn)實系統(tǒng)的廣泛應用 可以相信 隨著科學技術的進步和跟蹤注冊技術的不斷提高 其應用范圍會更加廣泛