機(jī)器人皮膚、氣動(dòng)觸覺手套... Meta讓未來的元宇宙有了更真實(shí)的觸覺交互。

若想看到元宇宙中高保真的虛擬世界，視覺交互也不能忽視。

這不，Meta要研發(fā)機(jī)械仿生眼了。

給人裝的嗎？不是...

Meta稱未來要把它放在仿生人的身體里，看來這是打算要造MetaHumans了？

近日，這家公司申請到了一種機(jī)械仿生眼的專利，名為Two-axis rotatable mechanical eyeball。

據(jù)稱，這項(xiàng)專利中的技術(shù)可以被用于構(gòu)建Facebook的AR/VR應(yīng)用程序，為了在元宇宙中更快地呈現(xiàn)3D圖像和體驗(yàn)。

總之，這一專利可以稱得上是Meta在元宇宙中的又一進(jìn)展。

Meta下一步，元宇宙之眼？

一項(xiàng)2021年12月批準(zhǔn)的「機(jī)械眼球100」（mechanical eyeball 100）文件稱，這個(gè)金屬球體是一個(gè)類似于人眼的機(jī)器眼，有兩個(gè)相交于中心點(diǎn)的旋轉(zhuǎn)軸。

從專利提交時(shí)間可以看，這項(xiàng)仿生眼專利是在2019年6月11日提交，2021年12月7日得到審批。

這項(xiàng)專利詳細(xì)介紹了一種高性能和逼真機(jī)械仿生眼的設(shè)計(jì)。

該機(jī)械眼未來將用作電子動(dòng)畫設(shè)備的一部分，以便更精準(zhǔn)地追蹤人類眼球的運(yùn)動(dòng)。

專利中，關(guān)于這項(xiàng)仿生眼設(shè)計(jì)的描述似乎也相當(dāng)復(fù)雜，部分設(shè)計(jì)意在模仿人類眼睛的鞏膜、視網(wǎng)膜和角膜，以及瞳孔和虹膜。

Meta為什么要單獨(dú)設(shè)計(jì)一個(gè)仿生眼呢？

難道是給《西部世界》擁有人工智能的仿生人使用嗎？

Meta稱，設(shè)計(jì)機(jī)械仿生眼是為了與機(jī)器人頭部進(jìn)行匹配，為了讓眼睛顯得更加真實(shí)。

這只仿生眼將配備傳感器，以幫它「看見」真實(shí)的世界，并且可以通過機(jī)器學(xué)習(xí)進(jìn)行訓(xùn)練和改進(jìn)。

機(jī)器學(xué)習(xí)可能基于人類眼球運(yùn)動(dòng)數(shù)據(jù)，然后將這種能力映射到機(jī)械眼上。

專利中還提到了，眼球?qū)⒈环旁陬愃朴谌祟惼つw的模具中。這一模具可能包括頭部和身體。

有網(wǎng)友表示，「那么，他們是MetaHumans嗎？」

但這項(xiàng)設(shè)計(jì)究竟用于何處，一位Meta發(fā)言人稱，「該公司不對其專利的具體覆蓋范圍或申請專利的原因發(fā)表評論。一般來說，專利并不一定涵蓋我們產(chǎn)品和服務(wù)中使用的技術(shù)。」

要知道，Meta這只仿生眼也可以提供更多的實(shí)際應(yīng)用。

仿生眼可以被用作更精確地追蹤人眼運(yùn)動(dòng)的工具，來觀測它在屏幕上以及圖像上停留的時(shí)間。

比如，廣告中經(jīng)常會(huì)用眼動(dòng)追蹤技術(shù)觀察用戶對廣告的喜愛程度。

另外，眼動(dòng)追蹤技術(shù)也可以被用于構(gòu)建Facebook的AR/VR應(yīng)用程序。

就比如一直爆火的Oculus頭顯，如果未來有了這項(xiàng)技術(shù)的加持，簡直如虎添翼。

正如知情人士所指出，這種技術(shù)可能會(huì)加速公司的增強(qiáng)現(xiàn)實(shí)和虛擬現(xiàn)實(shí)應(yīng)用的發(fā)展，這些應(yīng)用嚴(yán)重依賴于眼球追蹤。

不管怎么說，這項(xiàng)機(jī)械仿生眼技術(shù)更加堅(jiān)定了Meta進(jìn)軍元宇宙的決心。

一舉打通元宇宙「視觸聽」

這已經(jīng)不是Meta第一次考慮給機(jī)器人加入人類感官特征了。

早在去年11月，Meta與卡內(nèi)基梅隆大學(xué)（CMU）合作開發(fā)了一款輕量級，觸覺傳感機(jī)器人「皮膚」，可以給機(jī)器人賦予觸覺。

據(jù)稱，機(jī)械仿生眼和人造皮膚的探索是Meta人工智能部門在2019年進(jìn)行更廣泛的機(jī)器人實(shí)驗(yàn)的一部分。

這款皮膚名叫ReSkin，厚度只有2-3mm，表面類似橡膠具有彈性。

仔細(xì)看圖，可以發(fā)現(xiàn)其內(nèi)部嵌入了磁性顆粒。當(dāng)按壓/觸摸產(chǎn)生時(shí)，皮膚表面產(chǎn)生形變帶動(dòng)內(nèi)部粒子的磁場變化。這些變化會(huì)被磁力計(jì)監(jiān)測收集，并反饋給通過自監(jiān)督學(xué)習(xí)訓(xùn)練過的AI模型。

扎克伯格表示，可以用于元宇宙中的虛擬對象，使我們與之交互時(shí)獲得觸覺感受。

Meta首席人工智能科學(xué)家 Yann LeCun認(rèn)為機(jī)器人技術(shù)成為了研究人工智能的方式，他曾表示，機(jī)器人技術(shù)是扎克伯格抵制的一個(gè)領(lǐng)域。

LeCun曾表示，「這是人工智能研究人員試圖到達(dá)的地方。感知、推理、計(jì)劃和行動(dòng)的形成一個(gè)不斷循環(huán)的完整閉環(huán)，最后能夠從環(huán)境中獲得反饋?！?/p>

仿生眼主視覺，ReSkin電子皮膚主觸覺，還有Meta最具代表性的Oculus頭顯融合了視覺和聽覺效果。

可以看出，Meta在進(jìn)軍元宇宙這條路上已經(jīng)打通了視覺、聽覺、觸覺這人類三大感官體驗(yàn)。

其實(shí)，在觸覺方面，前段時(shí)間，Meta還揭秘了其秘密研發(fā)七年的項(xiàng)目「氣動(dòng)觸覺手套」。

這種觸覺手套可以通過氣囊讓你體驗(yàn)到抓取虛擬物體時(shí)的真實(shí)觸感。對于Meta來說，這款手套和其他可穿戴技術(shù)，都將讓我們通往在VR和AR中實(shí)現(xiàn)互動(dòng)的未來。

但是，真正元宇宙中的體驗(yàn)不僅僅包括「視觸聽」這三種感官特征，還要能夠聞到不同氣味，嘗到不同的味道。

目前來說，在Meta元宇宙技術(shù)體系中，沒有提到的感覺便是氣味和味道，這對攻克技術(shù)難題有了更高的要求。

不過，未來沒有什么不可能。

誰說Meta元宇宙是PPT？

2021年11月，F(xiàn)acebook在Connect大會(huì)上改名Meta，計(jì)劃投入千億美元，要大舉進(jìn)軍元宇宙。

Meta這一舉動(dòng)將所有人的視線轉(zhuǎn)移到其創(chuàng)造的虛擬世界中。

其實(shí)，Meta在元宇宙的布局不僅僅是上面所提到的項(xiàng)目，還有關(guān)于Avatar的研發(fā)等。

元宇宙是一個(gè)具有沉浸式空間感的3D數(shù)字化世界。

在這個(gè)世界中，人們通過穿戴VR設(shè)備或是芯片植入的方式，創(chuàng)造出人類的化身 (Avatar) ，融入其中。

在元宇宙中不只有人，還有虛擬物品，更重要的是還有機(jī)器人。

除了人-人、人-物交互以外，人-機(jī)、機(jī)-機(jī)、機(jī)-物交互也十分重要。

與機(jī)器人相關(guān)的，叫做機(jī)器人元宇宙。機(jī)器人元宇宙是機(jī)器人理解物理世界的基礎(chǔ)。上述提到的仿生眼、人造皮膚等技術(shù)，都是為了讓機(jī)器人更加的類人、逼真。

Meta在提升人類在元宇宙中的體驗(yàn)也做了很多的嘗試，有相當(dāng)多的突破。

比如，Codec Avatar這個(gè)項(xiàng)目就是一個(gè)利用3D捕捉和AI技術(shù)，創(chuàng)造逼真人物頭像的系統(tǒng)。這個(gè)項(xiàng)目從最初的高清頭像開始，一步步發(fā)展到全身的虛擬化身。

在這個(gè)過程中，全身視頻編解碼器被研發(fā)出來，使得元宇宙中的人類avatars可以支持更復(fù)雜的眼部、面部、四肢、軀干等部位的運(yùn)動(dòng)。舉例來說，項(xiàng)目團(tuán)隊(duì)通過EMG腕帶進(jìn)行XR輸入，對人的手部動(dòng)作的方式做了精準(zhǔn)的測量。

人類化身都取得了很多突破，那么通過物理手段對現(xiàn)實(shí)世界中的物品在元宇宙中進(jìn)行映射也不在話下。

比如，衣服在元宇宙中的真實(shí)模擬就十分逼真。不光完美復(fù)刻了衣服面料的彈性，如果抖動(dòng)衣服，衣服表面的褶皺也栩栩如生。

Meta所有項(xiàng)目的研發(fā)都是為了讓人能夠在元宇宙中有更好的體驗(yàn)。這也更加印證了，小扎的進(jìn)軍元宇宙的宣言不是紙上談兵。

Meta拓展元宇宙的下一步，你期待嗎？