亞伯拉什分享Facebook最新ARVR成果：手勢(shì)、動(dòng)捕、化身、AR虛實(shí)精確定位

2020年計(jì)算機(jī)視覺和模式識(shí)別大會(huì)匯聚了世界各地的計(jì)算機(jī)視覺研究者和工程師，而Facebook Reality Labs顯然不會(huì)錯(cuò)過(guò)這樣一場(chǎng)盛會(huì)。其中，首席科學(xué)家邁克爾·亞伯拉什通過(guò)視頻介紹了團(tuán)隊(duì)的研究及相關(guān)進(jìn)展。

亞伯拉什首先引用喬布斯于2005年在斯坦福大學(xué)畢業(yè)生演講中針對(duì)PC圖形界面未來(lái)發(fā)展方向的名言（You couldn’t argue about the inevitability,it was so obvious）指出，正如始于上世紀(jì)90年代的第一波HCI革命一樣，基于虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)的第二波HCI革命同樣不可避免。

第一波HCI革命是以PC和智能手機(jī)為代表的二維計(jì)算機(jī)，它們帶來(lái)的數(shù)字世界改變了我們娛樂(lè)，工作和社交的方式。但盡管是這樣，我們與數(shù)字世界的交互只能局限于二維屏幕。相反，亞伯拉什認(rèn)為虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)則有望充分發(fā)揮人類完整的能力，以至于數(shù)字和現(xiàn)實(shí)能夠?qū)崿F(xiàn)無(wú)縫的融合。

亞伯拉什認(rèn)為未來(lái)的VR頭顯能夠?qū)崿F(xiàn)200度視場(chǎng)，視網(wǎng)膜分辨率，可變焦距，逼真音頻，而AR眼鏡則是超級(jí)時(shí)尚，完全可以取代智能手機(jī)，并賦予佩戴者感知超能力。不過(guò)，目前這個(gè)愿景所需的技術(shù)遠(yuǎn)遠(yuǎn)沒有達(dá)到應(yīng)有的水平，包括光學(xué)系統(tǒng)，界面，觸覺，虛擬化身和人體工學(xué)等。

要怎么辦？亞伯拉什的答案非常簡(jiǎn)單：研究，研究，更多的研究。在演講中，他提到了Facebook Reality Lab正在進(jìn)行的研究及相關(guān)進(jìn)展，并提供了一系列的視頻材料。

首先是優(yōu)化的手部追蹤功能。如上方視頻所示，現(xiàn)在系統(tǒng)能夠相當(dāng)精確地追蹤手部和手指的快速運(yùn)動(dòng)。對(duì)于這一點(diǎn)，他表示光學(xué)手部和手指追蹤將成為空間計(jì)算機(jī)范式的重要組成要素。

Facebook在虛擬化身渲染方面同樣取得了進(jìn)展，包括人體模擬，骨骼追蹤，動(dòng)捕技術(shù)，以及Codec Avatars。根據(jù)亞伯拉什的說(shuō)法，再過(guò)數(shù)年就可以在虛擬現(xiàn)實(shí)中渲染出與真實(shí)別無(wú)二致的數(shù)字形象。

延伸閱讀：Facebook 50年征途：Codec Avatars，創(chuàng)造逼真虛擬角色

Facebooks XR未來(lái)的另一個(gè)重要組成要素是可以混合數(shù)字和物理信息的技術(shù)眼鏡。但要做到這一點(diǎn)，它們首先需要在空間方面對(duì)物理世界進(jìn)行分類，并在其中精確定位自己。在這樣的背景下，亞伯拉什展示了LiveMaps團(tuán)隊(duì)的一個(gè)研究示例：

利用機(jī)器視覺和SLAM技術(shù)，LiveMaps可以創(chuàng)建共享的虛擬映射。為了實(shí)現(xiàn)這種規(guī)模的技術(shù)，這家公司設(shè)想LiveMaps將依靠未來(lái)智能設(shè)備捕獲的眾包信息。

亞伯拉什強(qiáng)調(diào)，盡管未來(lái)一片光明，但擺在我們面前的挑戰(zhàn)依然巨大。他承認(rèn)，第二波HCI革命的拓荒之路相當(dāng)漫長(zhǎng)，尚需無(wú)數(shù)年，無(wú)數(shù)個(gè)十年，但這同時(shí)是它的魅力所在，而且不可避免，勢(shì)不可擋（You couldn’t argue about the inevitability,it was so obvious）。