前特斯拉Optimus科學(xué)家跳槽HF,直接開源了一個機器人代碼庫
今年 3 月,以構(gòu)建大型開源社區(qū)而聞名的 AI 初創(chuàng)公司 Hugging Face,挖角前特斯拉科學(xué)家 Remi Cadene 來領(lǐng)導(dǎo)一個新的開源機器人項目 ——LeRobot,引起了轟動。
Remi Cadene 在今年三月宣布結(jié)束其三年的 Tesla 機器人研究生涯,并加入 Hugging Face。
在此之前,Remi Cadene 是特斯拉 Autopilot 和 Optimus 機器人研究項目的團隊成員。
現(xiàn)在,Hugging Face 宣布正式推出并開源機器人工具包 LeRobot,基于有史以來最大規(guī)模的眾包機器人數(shù)據(jù)集。
LeRobot Github 鏈接:
??https://github.com/huggingface/lerobot??
LeRobot 代碼庫堪稱機器人領(lǐng)域的「Transformers」。
圖源:https://twitter.com/RemiCadene/status/1787378793499496855
Cadene 在 X 上表示:「人工智能發(fā)展的下一步是將其應(yīng)用于我們的物理世界。因此,我們正在推動社區(qū)共同努力構(gòu)建 AI 機器人,這對所有人開放!」
LeRobot 工具包不僅僅是一個軟件包,而且是一個全面的平臺,包括用于共享、可視化數(shù)據(jù)和訓(xùn)練 SOTA 模型的多功能庫。用戶可以通過 LeRobot 訪問大量預(yù)訓(xùn)練模型,以快速啟動他們的項目。
此外,LeRobot 與物理模擬器無縫集成,這允許沒有物理機器人硬件的愛好者和開發(fā)者在虛擬環(huán)境中模擬和測試他們的 AI 模型。
在硬件方面,LeRobot 旨在處理各種機器人硬件:「從教育和研究中使用的簡單機械臂到先進 AI 研究設(shè)施中更復(fù)雜的類人機器人。」
總的來說,LeRobot 項目的目標(biāo)是提供一個能夠適應(yīng)和控制任何形態(tài)機器人的 AI 系統(tǒng),使機器人在多功能性和可擴展性方面得到增強。
Cadene 還展示了借助 LeRobot,機器人可以獲取的一些能力,包括訓(xùn)練機器人抓取物體、在未繪制空間內(nèi)導(dǎo)航等等。
在 Mobile Aloha 數(shù)據(jù)上,完全端到端地學(xué)習(xí)導(dǎo)航和操作:
在兩個機械臂之間傳遞物體:
得益于大型語言模型(LLM)及生成式 AI 的突破性進展,機器人領(lǐng)域的發(fā)展也獲得了極大的推動。
例如,最近特斯拉 Optimus 團隊宣布了一項新進展:二代 Optimus 人形機器人已經(jīng)「進廠打工」了:
二代 Optimus 人形機器人
波士頓動力純電驅(qū)動的新版人形機器人 Atlas 問世:
新一代 Atlas
初創(chuàng)公司 Meetee Robotics 發(fā)布了首款雙足人形機器人 MenteeBot,它能理解自然語言命令:
MenteeBot
面向機器人技術(shù)升級、形態(tài)多樣化的現(xiàn)狀,Cadene 表示 LeRobot 項目的發(fā)展愿景是「從多樣化社區(qū)中構(gòu)建軟件和硬件,以在現(xiàn)實世界中開發(fā)下一代智能機器人」。
通過降低入門門檻、促進知識和資源共享,Hugging Face 將構(gòu)建一個可能重新定義 AI 機器人領(lǐng)域的社區(qū)。
本文轉(zhuǎn)自 機器之心 ,作者:機器之心
