機器人皮膚、氣動觸覺手套... Meta讓未來的元宇宙有了更真實的觸覺互動。若想看到元宇宙中高擬真的虛擬世界,視覺互動也不能忽視。所以,Meta要研發機械仿生眼了。
是讓人使用的嗎?不是...
Meta稱未來要把它放在仿生人的身體裡,看起來是打算要製造超人類(MetaHumans)了?
近日,這家公司申請到了一種機械仿生眼的專利,名為Two-axis rotatable mechanical eyeball。
據稱,這項專利中的技術可以被用於構建Facebook的AR/VR應用程式,為了在元宇宙中更快地呈現3D圖像和體驗。
總之,這一專利可以稱得上是Meta在元宇宙中的另一個進展。
Meta下一步,元宇宙之眼?
一項2021年12月通過的「機械眼球100」(mechanical eyeball 100)文件稱,這個金屬球體是一個類似於人眼的機器眼,有兩個相交於中心點的旋轉軸。
從專利提交時間可以看,這項仿生眼專利是在2019年6月11日提交,2021年12月7日得到通過。
這項專利詳細介紹了一種高性能和逼真機械仿生眼的設計。
該機械眼未來將用作電子動畫設備的一部分,以便更精準地追蹤人類眼球的運動。
專利中,關於這項仿生眼設計的描述似乎也相當複雜,部分設計意在模仿人類眼睛的鞏膜、視網膜和角膜,以及瞳孔和虹膜。
Meta為什麼要單獨設計一個仿生眼呢?
難道是給《西部極樂園》擁有人工智慧的仿生人使用嗎?
Meta稱,設計機械仿生眼是為了與機器人頭部進行匹配,為了讓眼睛顯得更加真實。
這隻仿生眼將配備感測器,以幫它「看見」真實的世界,並且可以透過機器學習進行訓練和改進。
機器學習可能基於人類眼球運動資料,然後將這種能力映射到機械眼上。
專利中還提到了,眼球將被放在類似於人類皮膚的模具中。這一模具可能包括頭部和身體。
有網友表示,「那麼,他們是MetaHumans嗎?」
但這項設計究竟用於何處,一位Meta發言人稱,「該公司不對其專利的具體覆蓋範圍或申請專利的原因發表評論。一般來說,專利並不一定涵蓋我們產品和服務中使用的技術。」
要知道,Meta這隻仿生眼也可以提供更多的實際應用。
仿生眼可以被用作更精確地追蹤人眼運動的工具,來觀測它在螢幕上以及圖像上停留的時間。
例如,廣告中經常會用眼動追蹤技術觀察使用者對廣告的喜愛程度。
另外,眼動追蹤技術也可以被用於構建Facebook的AR/VR應用程式。
就比如一直很紅的Oculus頭戴顯示器,如果未來有了這項技術的加持,簡直如虎添翼。
正如知情人士所指出,這種技術可能會加速公司的擴增實境和虛擬實境應用的發展,這些應用嚴重依賴於眼球追蹤。
不管怎麼說,這項機械仿生眼技術更加堅定了Meta進軍元宇宙的決心。
一舉打通元宇宙「視觸聽」
這已經不是Meta第一次考慮為機器人加入人類感官特徵了。
早在去年11月,Meta與卡內基美隆大學(CMU)合作開發了一款羽量級,觸覺傳感機器人「皮膚」,可以為機器人賦予觸覺。
據稱,機械仿生眼和人造皮膚的探索是Meta人工智慧部門在2019年進行更廣泛的機器人實驗的一部分。
這款皮膚名叫ReSkin,厚度只有2-3mm,表面類似橡膠具有彈性。
仔細看圖,可以發現其內部嵌入了磁性顆粒。當按壓/觸摸產生時,皮膚表面產生形變帶動內部粒子的磁場變化。這些變化會被磁力計監測收集,並回饋給透過自監督學習訓練過的AI模型。
祖克伯表示,可以用於元宇宙中的虛擬物件,使我們與之互動時獲得觸覺感受。
Meta首席人工智慧科學家 Yann LeCun認為機器人技術成為了研究人工智慧的方式,他曾表示,機器人技術是祖克伯抵制的一個領域。
LeCun曾表示,「這是人工智慧研究人員試圖到達的地方。感知、推理、計畫和行動的形成一個不斷迴圈的完整閉環,最後能夠從環境中獲得回饋。」
仿生眼主視覺,ReSkin電子皮膚主觸覺,還有Meta最具代表性的Oculus頭戴顯示器融合了視覺和聽覺效果。
可以看出,Meta在進軍元宇宙這條路上已經打通了視覺、聽覺、觸覺這人類三大感官體驗。
其實,在觸覺方面,前段時間,Meta還揭秘了其秘密研發七年的項目「氣動觸覺手套」。
這種觸覺手套可以通過氣囊讓你體驗到抓取虛擬物體時的真實觸感。對於Meta來說,這款手套和其他可穿戴技術,都將讓我們通往在VR和AR中實現互動的未來。
但是,真正元宇宙中的體驗不僅僅包括「視觸聽」這三種感官特徵,還要能夠聞到不同氣味,嘗到不同的味道。
目前來說,在Meta元宇宙技術體系中,沒有提到的感覺便是氣味和味道,這對攻克技術難題有了更高的要求。
不過,未來沒有什麼不可能。
誰說Meta元宇宙只是PPT?
2021年11月,Facebook在Connect大會上改名Meta,計畫投入千億美元,要大舉進軍元宇宙。
Meta這一舉動將所有人的視線轉移到其創造的虛擬世界中。
其實,Meta在元宇宙的布局不僅僅是上面所提到的專案,還有關於Avatar的研發等。
元宇宙是一個具有沉浸式空間感的3D數位化世界。
在這個世界中,人們透過穿戴VR裝置或是晶片植入的方式,創造出人類的化身 (Avatar) ,融入其中。
在元宇宙中不只有人,還有虛擬物品,更重要的是還有機器人。
除了人-人、人-物互動以外,人-機、機-機、機-物互動也十分重要。
與機器人相關的,叫做機器人元宇宙。機器人元宇宙是機器人理解物理世界的基礎。上述提到的仿生眼、人造皮膚等技術,都是為了讓機器人更加的類人、逼真。
Meta在提升人類在元宇宙中的體驗也做了很多的嘗試,有相當多的突破。
比如,Codec Avatar這個專案就是一個利用3D捕捉和AI技術,創造逼真人物大頭貼的系統。這個專案從最初的高解析大頭貼開始,一步步發展到全身的虛擬化身。
在這個過程中,全身視訊轉碼器被研發出來,使得元宇宙中的人類avatars可以支援更複雜的眼部、臉部、四肢、軀幹等部位的運動。舉例來說,專案團隊透過EMG腕帶進行XR輸入,對人的手部動作的方式做了精準的測量。
人類化身都取得了很多突破,那麼透過物理手段對現實世界中的物品在元宇宙中進行映射也不在話下。
例如,衣服在元宇宙中的真實模擬就十分逼真。不光完美複刻了衣服面料的彈性,如果抖動衣服,衣服表面的褶皺也栩栩如生。
Meta所有專案的研發都是為了讓人能夠在元宇宙中有更好的體驗。這也更加印證了,祖克伯的進軍元宇宙的宣言不是紙上談兵。
Meta拓展元宇宙的下一步,你期待嗎?
資料來源:
- Facebook has designed a humanlike mechanical eyeball, along with a body and head that would be covered in a mold 'resembling human skin.'
- Two-axis rotatable mechanical eyeball
加入電腦王Facebook粉絲團