TMT观察网_独特视角观察TMT行业

詳解VR定位技術:如何在虛擬世界中自由移動?智能

87870 2017-09-30 23:57
分享到:
導讀

當今排名前列的VR硬件設備廠商HTC Vive和Oculus所采用的定位方式都采用了PnP解算,但都有各自的局限性和適應的場景。

空間定位是VR 市場中一個非常關鍵的技術,當今排名前列的VR硬件設備廠商(HTC Vive和Oculus)分別采用了不同的空間定位方案:

Oculus——Constellation紅外攝像頭定位HTC Vive、大朋VR——燈塔激光定位系統

盡管這兩種定位方式都采用了PnP解算,但都有各自的局限性和適應的場景,下文將逐一詳細分析。

丨Oculus Constellation定位系統

Oculus采用的是基于Camera的定位方案,被稱為Constellation。在Oculus頭盔和手柄上都布滿了紅外Sensor,以某個固定的模式在閃爍。

通過特制的Camera以一個固定的頻率(Oculus Rift CV1是60fps)拍攝,得到一組圖片。系統通過這些點在圖片上的二維位置,以及已知的頭盔或者手柄的三維模型,反推出點在三維空間中的位置。這個過程可以進一步的細分成以下的步驟:

首先,為了確保準確的定位到頭盔和手柄上的LED,PC端的Oculus Camera軟件/驅動程序通過HID接口發送某個命令點亮LED,該亮度足以被Camera捕捉到,同時這些LED以某個特殊的模式閃爍。這樣能確保即使有遮擋的情況下,在不同的角度下,只要有足夠多的LED被拍攝到,整個的tracking系統就能正常工作,不會被環境中的其他噪聲信號所影響。

然后是記錄下每一個被捕捉到的LED的位置和方向。

當然,為了做好定位,Oculus Camera本身并不需要LED的顏色,只需記錄每個點的明暗,所以Oculus Camera固件中記錄下的的圖像為752×480像素, 像素格式為Y8灰階,每一幅圖看起來如下:

拿到頭盔上的LED在二維圖片上的位置,又有頭盔上Sensor的三維模型,有什么辦法可以估算出這些點的三維位置?這本質上是一個Pnp解算的問題(https://en.wikipedia.org/wiki/Perspective-n-Point):有了n個3D點的模型(就像上面提到的LED點在頭盔上的3D分布), Camera拍攝下來的n個2D點的集合,再加上Camera本身的內部的參數,可以推算出這些點的位置坐標(X,Y,Z) 以及姿態(Yaw,Pitch,Roll)。

這個點的集合到底有多大?這是一個尋求最優解的問題,常見的做法是n>=3,也就是圖片上只要拍到三個以上的LED,就能夠解算出相關的姿態和位置。考慮到遮擋或者拍攝的照片不夠清楚等因素,實踐中看,至少要拍攝到4-5個點,整個頭盔的姿態和位置才能被正確的算出,這也是為什么在Oculus的頭盔上布滿了很多LED點的一個重要原因。

算出來的數據有誤差怎么解決?一個常見的辦法是得到6DOF的數據之后,用該數據再做一次投影,產生新的2D圖像,把該圖像和我們開始用來計算的圖像進行比較,得到一個誤差函數,應用該函數來進行校準。不過這帶來另外一個問題:點進行比較的時候,你怎么知道3d模型上的點,和拍攝到的二維圖像上的點之間的匹配關系?如果做一一對應的全匹配計算的話,計算量太大。所以Oculus采用的辦法是采用不同的閃爍模式,來快速匹配3d模型上的點和拍攝到的圖像上的點。

進一步,在姿態估計的問題上面,通過光學(Camera圖片)得到的姿態會有誤差,而這種誤差主要來自于物體快速移動時捕獲到的照片上的點識別的困難。為了減少這種誤差,需要通過IMU信息來進行一步校準通過PnP解算得到的姿態,這就是所謂的Sensor數據融合。

從上面的描述可以看出來,基于Camera的光學定位技術,安裝配置比較簡單,成本也比較低,但是圖像處理技術較為復雜,物體移動較快時識別物體的位置有比較大的困難,同時容易受到自然光的干擾。

另外,基于Camera的定位精準度受到Camera本身分辨率的限制,比如Oculus Rift的Camera為720p,比較難以提供亞毫米級的精準定位。

最后,Camera自身能夠捕捉到的照片的距離比較近,不能應用到很大的房間位置,一般都只能提供桌面級別的VR定位。當然最近Oculus提供了三個Camera的方案,試圖在room scale級別和燈塔定位技術一較高下。

丨燈塔激光定位技術

反之,HTC、大朋等企業提供的燈塔激光定位技術,避免了Camera定位技術的高復雜度,具有定位精度高,反應速度快,可分布式處理等優勢,能夠允許用戶在一定的空間內進行活動,對使用者來說限制小,能夠適配需要走動起來的游戲,真正實現Room Scale級別的vr定位。

下面從燈塔定位的原理解釋為什么在大空間的應用中燈塔激光定位是一個更好的選擇。

HTC的燈塔定位系統中有兩個基站,每個基站上面有兩個馬達,其中一個馬達往水平方向掃射,另外一個朝垂直方向掃射。

基站刷新的頻率是60Hz,基站a上面的馬達1首先朝水平方向掃射,8.33毫秒之后,第二個馬達朝垂直方向上掃射(第二個8.33毫秒),然后基站a關閉,接著基站b重復和基站a一樣的工作......

這樣只要在16ms中,有足夠多的Sensor點同時被垂直和水平方向上的光束掃到,這些Sensor點相對于基站基準面的角度能夠被計算出來,而被照射到的Sensor點在投影平面上的坐標也能夠獲得。同時,靜止時這些點在空間中的坐標是已有的,可以作為參考,這樣就能夠計算出,當前被照的點相對于基準點的旋轉和平移,進一步的得出這些點的坐標,這其實也是一個PnP問題。

進一步的,再融合IMU上獲得的姿態,就能夠較準確的給出頭盔或者手柄的姿態和位置。

在上一步中計算出來的頭盔/手柄的位置和姿態信息,通過RF傳遞到和PC相連的一個接收裝置,該裝置再通過USB接口,把數據上傳到PC端的driver或者OpenVR runtime,最后上傳到游戲引擎以及游戲應用中。

丨大朋VR定位方案

相比HTC Vive的定位技術,大朋在激光定位方面做了進一步的創新,在每個基站上面加入了三個馬達,從上到下編號,1號馬達從垂直方向上掃描,2號馬達從水平方向掃描,3號馬達從垂直方向掃描。

每一個馬達掃描的時間間歇是4ms,該馬達在工作的時候,其他馬達都處于關閉狀態,基本時序如下:

基站上面的馬達1首先發送同步光信號給頭盔/手柄上的Sensor點,Sensor點清零計數器,馬達1接著朝垂直方向掃射;4毫秒之后,第2個馬達朝水平方向上掃射(第二個4毫秒),然后是第3個馬達朝垂直方向上掃射(第3個4毫秒)。

被照射到的Sensor點可以比較容易的得到被照射時的時間,以及每一個馬達開始掃描的時間。馬達的轉速是固定的,這樣就可以得到Sensor點相對于掃射平面的角度,而該角度編碼后通過RF傳送到PC端,再做進一步的姿態融合之后,PC端就能容易的拿到6DOF的數據。

在指定時間里增加掃描的次數,大大減少所需要的sensor數量。從實際測試中看,在大朋的最新款的E3P中,最后需要的傳感器數量大概是Lighthouse的四分之一左右(Lighthouse用了幾十個傳感器),頭盔和手柄所需要的傳感器都是個位數,頭盔手柄都變得更輕便。這不僅大大增加了整個定位系統的穩定性,也讓sensor在頭盔或手柄上的布局也更加的簡單。

進一步的,由于每次掃描的時間間隔更短,所以手柄的姿態等信息能夠以更快的頻率(每4ms一次)傳送到PC端,更及時的更新到VR游戲中。

在玩VR游戲或者應用的時候,難免會出現各種各樣的遮擋,為了讓用戶能夠在房間級別的空間中暢玩,必須要讓燈塔在360度各角度方位都能夠照射到頭盔和手柄,大朋VR的解決方案和htc一樣,也是雙基站。雙基站的工作時序和單基站一樣,唯一的區別是,主基站工作的時候,從基站是關閉的,反之亦然。

大朋VR激光定位固有的定位穩定,需要的Sensor點少這些特點,使得該定位方案能夠非常好的應用到教育行業和多人聯機對戰中。

比如以下的場景中,只需要一到兩個基站可以覆蓋多臺網吧電腦,大大降低成本。

綜上來看,相較于紅外方案,激光定位在大空間多人聯機的應用上具有較明顯的優勢。

來源:87870

定位 Camera 能夠 位置 頭盔
分享到:

1.TMT觀察網遵循行業規范,任何轉載的稿件都會明確標注作者和來源;
2.TMT觀察網的原創文章,請轉載時務必注明文章作者和"來源:TMT觀察網",不尊重原創的行為TMT觀察網或將追究責任;
3.作者投稿可能會經TMT觀察網編輯修改或補充。


觀點約架

主站蜘蛛池模板: 首页-恒温恒湿试验箱_恒温恒湿箱_高低温试验箱_高低温交变湿热试验箱_苏州正合 | 石英陶瓷,石英坩埚,二氧化硅陶瓷-淄博百特高新材料有限公司 | 电位器_轻触开关_USB连接器_广东精密龙电子科技有限公司 | 冷凝水循环试验箱-冷凝水试验箱-可编程高低温试验箱厂家-上海巨为(www.juweigroup.com) | 周易算网-八字测算网 - 周易算网-宝宝起名取名测名字周易八字测算网 | 黄石东方妇产医院_黄石妇科医院哪家好_黄石无痛人流医院 | 亿立分板机_曲线_锯片式_走刀_在线式全自动_铣刀_在线V槽分板机-杭州亿协智能装备有限公司 | 深圳美安可自动化设备有限公司,喷码机,定制喷码机,二维码喷码机,深圳喷码机,纸箱喷码机,东莞喷码机 UV喷码机,日期喷码机,鸡蛋喷码机,管芯喷码机,管内壁喷码机,喷码机厂家 | 「安徽双凯」自动售货机-无人售货机-成人用品-自动饮料食品零食售货机 | 政府园区专业委托招商平台_助力企业选址项目快速落地_东方龙商务集团 | 超声波焊接机_超音波熔接机_超声波塑焊机十大品牌_塑料超声波焊接设备厂家 | 合肥风管加工厂-安徽螺旋/不锈钢风管-通风管道加工厂家-安徽风之范 | 耐酸泵,耐酸泵厂家-淄博华舜耐腐蚀真空泵 | 工程管道/塑料管材/pvc排水管/ppr给水管/pe双壁波纹管等品牌管材批发厂家-河南洁尔康建材 | 铆钉机|旋铆机|东莞旋铆机厂家|鸿佰专业生产气压/油压/自动铆钉机 | 常州企业采购平台_常州MRO采购公司_常州米孚机电设备有限公司 | 液晶拼接屏厂家_拼接屏品牌_拼接屏价格_监控大屏—北京维康 | 临海涌泉蜜桔官网|涌泉蜜桔微商批发代理|涌泉蜜桔供应链|涌泉蜜桔一件代发 | ◆大型吹塑加工|吹塑加工|吹塑代加工|吹塑加工厂|吹塑设备|滚塑加工|滚塑代加工-莱力奇塑业有限公司 | 塑胶跑道施工-硅pu篮球场施工-塑胶网球场建造-丙烯酸球场材料厂家-奥茵 | 洗瓶机厂家-酒瓶玻璃瓶冲瓶机-瓶子烘干机-封口旋盖压盖打塞机_青州惠联灌装机械 | 杭州画室_十大画室_白墙画室_杭州美术培训_国美附中培训_附中考前培训_升学率高的画室_美术中考集训美术高考集训基地 | 成都软件开发_OA|ERP|CRM|管理系统定制开发_成都码邻蜀科技 | 西门子气候补偿器,锅炉气候补偿器-陕西沃信机电工程有限公司 | 华东师范大学在职研究生招生网_在职研究生招生联展网 | 反渗透阻垢剂-缓蚀阻垢剂厂家-循环水处理药剂-山东鲁东环保科技有限公司 | 液氨泵,液化气泵-淄博「亚泰」燃气设备制造有限公司 | 口臭的治疗方法,口臭怎么办,怎么除口臭,口臭的原因-口臭治疗网 | 塑料熔指仪-塑料熔融指数仪-熔体流动速率试验机-广东宏拓仪器科技有限公司 | ERP企业管理系统永久免费版_在线ERP系统_OA办公_云版软件官网 | 重庆磨床过滤机,重庆纸带过滤机,机床伸缩钣金,重庆机床钣金护罩-重庆达鸿兴精密机械制造有限公司 | 德国BOSCH电磁阀-德国HERION电磁阀-JOUCOMATIC电磁阀|乾拓百科 | 细砂提取机,隔膜板框泥浆污泥压滤机,螺旋洗砂机设备,轮式洗砂机械,机制砂,圆锥颚式反击式破碎机,振动筛,滚筒筛,喂料机- 上海重睿环保设备有限公司 | 尼龙PA610树脂,尼龙PA612树脂,尼龙PA1010树脂,透明尼龙-谷骐科技【官网】 | 黑田精工电磁阀-CAMMOZI气缸-ROSS电磁-上海茂硕机械设备有限公司 | 欧美日韩国产一区二区三区不_久久久久国产精品无码不卡_亚洲欧洲美洲无码精品AV_精品一区美女视频_日韩黄色性爱一级视频_日本五十路人妻斩_国产99视频免费精品是看4_亚洲中文字幕无码一二三四区_国产小萍萍挤奶喷奶水_亚洲另类精品无码在线一区 | 实战IT培训机构_IT培训班选大学生IT技术培训中心_中公优就业 | 气象监测系统_气象传感器_微型气象仪_气象环境监测仪-山东风途物联网 | 真空粉体取样阀,电动楔式闸阀,电动针型阀-耐苛尔(上海)自动化仪表有限公司 | 有机废气处理-rto焚烧炉-催化燃烧设备-VOC冷凝回收装置-三梯环境 | 广东成考网-广东成人高考网 |