Uploads%2farticles%2f15155%2ffrl
|
2021-08-06

就算我頭戴 VR,我也要讓你看到我的眼神 | 前沿技術

這是一個愚蠢的想法缓屠,充其量是一種新奇事物。

很多企業(yè)的科學研究(比如 AI/AR 等前沿研究)因為商業(yè)化的壓力而黃了敌完,但 Facebook 仍在瘋狂地在實驗性的研究項目上做投入。

近日羊初,Facebook Reality Labs (FRL)的科學家 Nathan Matsuda 通過博客展示了一項實驗性的 VR 研究——反向透傳 VR(reverse passthrough VR)滨溉。

佩戴 VR 設備的人什湘,他的眼睛能夠「透傳」到設備外面的顯示屏上,讓你能看到他的眼睛——就像下圖的樣子晦攒,八角形的鏡框里裝的不是透明玻璃片闽撤,而是 3D 顯示屏。

%E9%80%8F%E4%BC%A0%E9%95%9C%E5%A4%B4%E7%89%B9%E5%86%99

此前 Facebook 曾推出過 Passthrough+ 和實驗性的 Passthrough API 技術脯颜,雖然都叫「透傳」哟旗,但這些是讓佩戴 VR 設備的人能夠看到外面的情況。

而反向透傳則與此正好相反栋操,是讓外面的人看到里面的情況闸餐,這樣,就促進了眼神的交流矾芙。因為通常 VR 頭戴設備是密封的绎巨,里面的人看不到外面,外面的人也看不到里面蠕啄。

Matsuda 在兩年前就啟動了項目研究场勤,當時的做法是,佩戴定制的 Rift S 設備歼跟,正面裝有 3D 顯示器和媳。在屏幕上,他的面部浮動 3D 圖像由游戲引擎粗略渲染哈街,使用來自設備內的一對眼動追蹤攝像頭的信號重新創(chuàng)建了他的眼睛注視留瞳。

Rift_S_%E8%AE%BE%E5%A4%87

Matsuda 第一次把這項研究展示給他的老板——FRL 首席科學家 Michael Abrash 時候,Abrash 的第一反應是:這是一個愚蠢的想法骚秦,充其量是一種新奇事物她倘。但他還是支持了 Matsuda 這樣做,因為這很獨特作箍。

兩年后硬梁,3D 顯示技術和研究原型有了顯著的發(fā)展,具有專門構建的光學胞得、電子荧止、軟件等一系列的技術支持,可以捕捉和描繪更逼真的 3D 面部阶剑。

Matsuda 公布的原型設備將在下周的 SIGGRAPH 大會上展示跃巡。目前如我們所見,這個設備上插滿了攝像頭和電纜牧愁,距離獨立設備還很遠素邪,并且,眼睛和面部的渲染還不夠逼真猪半。

盡管它離產品路線圖還很遠兔朦,然而偷线,它確實讓我們看到了未來——通過反向透傳實現的虛擬世界和現實世界的融合。

200861371993198
左圖:禁用了外部顯示器的 VR 設備烘绽,代表當前的技術水平。外界看不到佩戴者的眼神俐填。
中圖:帶有外向 2D 顯示器的 VR 設備安接。外界可以看到佩戴者的眼神,但視角不準確英融,比較難判斷眼神的方向盏檐。
右圖:最新的帶有外向 3D 顯示器的 VR 設備,運用了反向透傳技術驶悟,外界可以看到佩戴者的眼神胡野,并能夠判斷眼神的方向。

Matsuda 在博文中透露痕鳍,在這項研究中硫豆,FRL 使用了微透鏡陣列光場顯示器,因為它很薄笼呆,構造簡單熊响,并且基于現有的消費類 LCD 技術。這些顯示器使用一個微小的透鏡網格诗赌,將來自不同 LCD 像素的光向不同方向發(fā)射出去汗茄,這樣觀察者在從不同方向觀看顯示器時會看到不同的圖像。

ezgif

但 FRL 的這套系統并非都是革命性的铭若。

HTC 在 vive Pro 頭顯設備上安裝了面部追蹤插件洪碳,將運動映射到 VR 設備內的虛擬形象上,盡管沒有向外的顯示器叼屠,但映射原理是相似的瞳腌。

HoloLens 等 AR 和 XR 設備采用了透明或半透明的鏡片,通過提升透光度來實現虛擬世界與現實世界的「透傳」镜雨,其效果纯趋,遠遠比 Facebook 的反向透傳 3D 成像要清晰和真實得多,并且也沒有視角的問題冷离。

Facebook 的這項研究其實是想論證吵冒,即便是 VR 頭戴設備的外殼是密封的,即便 VR 頭戴設備的鏡片是不透明的或被完全遮擋的西剥,但有了反向透傳技術痹栖,就不會影響到佩戴者與外界的眼神交流


微信號:shenzhenware / 深圳灣

主筆:周全 / 深圳灣

編輯:陳述 / 深圳灣

>>
Back to top btn
亚洲AV无码国产精品网址,久久亚洲AV成人出白浆无码国产,日韩AV美乳欧美,永久免费AV无码软件app下载