Facebook當前的沉浸式產品是OculusQuest2
今年,明年,甚至明年我們都不會戴上魔術般的Tony Stark AR智能眼鏡。盡管Facebook已經在與Luxottica合作開發智能眼鏡,但這些眼鏡還不會成為世界感知的混合現實設備。但是,Facebook的Aria項目已準備好從本月開始,將頭戴式傳感器陣列部署到西雅圖和舊金山灣區的100余名測試人員,開始繪制真實世界的地圖。該公司周三在其虛擬Facebook Connect會議上宣布了這一消息。
Facebook當前的沉浸式產品是Oculus Quest 2,這是一款先進的獨立VR頭盔,可以稍微掃描現實世界。但是,Facebook的AR野心遠不止于此:該公司目前正在研究繪制真實世界的空間掃描圖,即LiveMaps,它將成為未來一副AR眼鏡的骨干。Facebook的AR和VR副總裁Andrew Bosworth與CNET談了新聞,以及該公司領導VR,AR的地方以及該公司計劃如何解決隱私問題以及未來VR的通用Facebook登錄。
智能眼鏡傳感器,不帶智能眼鏡部分
Aria項目絕對不是一副真正的智能眼鏡。對于那些未來的眼鏡來說,這是一個“傳感器陣列”。Facebook在Aria上的帖子說,它將擁有“用于VR頭戴設備的完整傳感器套件,以提高空間感知能力,”并補充說,“它們還可以從GPS計算位置,拍攝高分辨率圖片,并捕獲多通道音頻和眼睛圖像。” 一組帶有掛繩的標記清晰的測試人員將反復使用這些研究設備,西雅圖和舊金山灣區的一組約100名Facebook員工和承包商“接受了在何時何地使用該設備的培訓,什么時候不去。
Facebook表示,這些設備將“從佩戴者的角度捕獲視頻和音頻,以及眼睛的移動和位置數據”,但這些信息將保留在設備上,Facebook研究人員在清理這些數據之前不會看到它們。人臉和敏感信息,例如汽車牌照。
Facebook計劃完善其LiveMaps數據,該數據將是眼鏡使用該設備瀏覽的3D地圖陣列。但它還計劃部分通過智能空間音頻技術培訓眼鏡的AI助手。眼動元件還表明,眼動追蹤技術(在Facebook的VR頭盔上不存在)將在智能眼鏡技術問世時成為其主要組成部分。
這些研究項目使人們想到了在公共場所進行的其他灣區技術實驗,從Google Glass到自動駕駛汽車。現實世界和數據收集挑戰的交集,智能眼鏡構成的聲音聽起來像是一個非常棘手的問題,Facebook很難弄清楚,人們也很難信任。谷歌,蘋果,微軟,Magic Leap和Niantic也在追求將世界掃描的地圖數據與可識別位置的硬件相結合。
但是對于Facebook來說,在實驗室外進行的這種真實世界的測試尚未開發,將帶來很多問題。博斯沃思(Bosworth)對Facebook的測試人員說:“他們仍有責任確保它不在您不期望的地方,在祈禱室,浴室,您希望看到的明顯地方”,以確保耳機沒有記錄在敏感區域。但是Bosworth認為,個人視圖信息對于理解AR眼鏡的AI和設計很重要。“我們有來自衛星的數據集,也有來自汽車的數據集,這與人行道上頭頂上有樹木和東西的人的高度并不完全一樣。”
帶攝像頭的黑色眼鏡看起來很像Facebook共享照片中的日常眼鏡,但記錄時會亮起白光。
博斯沃思強調,其他研究人員無法立即看到眼鏡上的數據。他談到Project Aria收集的照片數據時說:“眼鏡附帶的數據將被隔離三天,然后對其進行清理,以使所有人臉變得模糊,車牌也變得模糊起來,然后才有人可以使用它。”
根據Bosworth的說法,具體信息也是讓Facebook減少對AR中數據收集的依賴的一部分,在依靠內置的3D LiveMap減少眼鏡處理的同時剝離了這些信息。“我們需要以自我為中心的數據集,這樣我們才能開始理解,'嘿,我們如何真正減少真實AR眼鏡上的數據收集?”