特斯拉前AI總監(jiān)Karpathy解密離職和純視覺(jué)方案
特斯拉前人工智能總監(jiān),新晉AI網(wǎng)紅老師Andrej Karpathy近日參加了MIT人工智能專家Lex Fridman的播客節(jié)目。對(duì)于人工智能愛(ài)好者來(lái)說(shuō),這次訪談可謂是「雙廚狂喜」。
將近三個(gè)半小時(shí)的訪談中,兩人談?wù)摿巳斯ぶ悄?、宇宙、人類社?huì)等宏大命題,還具體討論了特斯拉的多項(xiàng)技術(shù),如自動(dòng)駕駛、Optimus人形機(jī)器人、和特斯拉視覺(jué)方案。此外,兩人還聊到了觀眾最關(guān)心的Andrej的離職,以及特斯拉取消超聲波雷達(dá)的原因。
不用雷達(dá):貴還難使!
特斯拉去年從傳感器套件中刪除了毫米波雷達(dá),剛剛又宣布要移除所有超聲波雷達(dá),只保留攝像頭,采用純視覺(jué)方案。Lex問(wèn)道:「這使車輛的道路探測(cè)變得更難還是更容易?」
Karpathy表示:「人們大都會(huì)認(rèn)為這些傳感器是汽車的不可或缺的資產(chǎn),但如果充分考慮產(chǎn)品的整體性,這些傳感器實(shí)際上是潛在的負(fù)擔(dān)?!?/span>
「這些傳感器不是免費(fèi)的,不可能憑空出現(xiàn)在車上。不僅需要有一個(gè)完整的供應(yīng)鏈,還需要有人負(fù)責(zé)采購(gòu),」而這些都是要花真金白銀的。
同時(shí),傳感器可能會(huì)故障,需要更換?!缸鳛槠囍圃斓囊徊糠郑瑐鞲衅鞯纳a(chǎn)還可能拖累整體進(jìn)度。所以,你不僅需要采購(gòu)和維護(hù),還必須有編寫固件的團(tuán)隊(duì)?!?/span>
不僅如此,使用雷達(dá)傳感器還會(huì)導(dǎo)致探測(cè)系統(tǒng)的冗雜。Karpathy說(shuō):「把它們納入到汽車系統(tǒng)中后,會(huì)導(dǎo)致系統(tǒng)整體的過(guò)度膨脹?!?/span>
安裝這么多的傳感器對(duì)數(shù)據(jù)引擎也會(huì)造成壓力。隨時(shí)間不斷發(fā)生發(fā)展,傳感器的功能越來(lái)越細(xì)化?!脯F(xiàn)在有太多的雷達(dá),每個(gè)的功能都不盡相同。這造成了探測(cè)系統(tǒng)的過(guò)度膨脹。此外,過(guò)多的雷達(dá)還會(huì)互相干擾,影響效果?!?/span>
他高度贊揚(yáng)前老板馬斯克化繁為簡(jiǎn)的能力,「我認(rèn)為埃隆很擅長(zhǎng)簡(jiǎn)化,他曾說(shuō):『最好的部件是沒(méi)有部件?!凰倳?huì)嘗試拋棄那些不重要的東西,一直在做減法,因?yàn)樗私饨M織的熵增現(xiàn)象。」
成本高,問(wèn)題多,需要人員不斷修復(fù)。還會(huì)帶來(lái)探測(cè)系統(tǒng)的冗雜。在這種情況下,安裝雷達(dá)的成本很高,并且沒(méi)有很大的發(fā)展?jié)摿Α?/span>
「作為一個(gè)計(jì)算機(jī)視覺(jué)工程師,想改善車輛的探測(cè)網(wǎng)絡(luò),就會(huì)考慮增加傳感器是否有用,有多大用處。我們進(jìn)行對(duì)比試驗(yàn),真正確定雷達(dá)是否能給車主提供非常有用的路況信息。但結(jié)果表明區(qū)別并不大,這說(shuō)明雷達(dá)并沒(méi)有用?!?/span>
Karpathy不僅解釋特斯拉拋棄這項(xiàng)技術(shù)的原因,還斷言其他汽車公司也會(huì)做出相同的選擇?!负图す饫走_(dá)相似,我認(rèn)為超聲波雷達(dá)不能提供很多額外信息。我認(rèn)為其他還在用激光雷達(dá)的公司也會(huì)拋棄這項(xiàng)技術(shù)的?!?/span>
純視覺(jué)方案:更勝一籌
Karpathy對(duì)于純視覺(jué)方案抱有很大希望?!溉绻x擇純視覺(jué)方案,我們可以集中所有資源,建立強(qiáng)大的數(shù)據(jù)引擎?!?/span>
「這種傳感器的帶寬非常高,我們?cè)谶@方面取得了實(shí)質(zhì)進(jìn)展。只要大力投資該技術(shù),就可以獲得非凡的成就?!?/span>
Karpathy表示,純視覺(jué)方案既是必要的,也是充分的。某種意義上講,世界是為了人類的視覺(jué)消費(fèi)而被設(shè)計(jì)出來(lái)的,人們有視覺(jué)上的需求。
同時(shí),該方案能提供所有駕駛者需要的全部駕駛信息?!敢虼?,我們必須集中資源發(fā)展這項(xiàng)技術(shù),并不斷問(wèn)自己:『我真的要引入其他的傳感器嗎?』我認(rèn)為這種情況下的答案是否定的?!?/span>
雖然純視覺(jué)方案獲得Karpathy的大力支持,但當(dāng)Lex問(wèn)及如何看待激光雷達(dá)和純視覺(jué)方案,以及點(diǎn)云和體素之間的區(qū)別時(shí),Karpathy坦言:兩者不是自動(dòng)化駕駛的重點(diǎn)。
他說(shuō):「我一直看不懂這個(gè)爭(zhēng)論。因?yàn)檫@不是問(wèn)題的核心。我覺(jué)得大家在討論自動(dòng)化時(shí)應(yīng)該關(guān)注是否有路測(cè)車隊(duì)作為支撐。這個(gè)才是人工智能系統(tǒng)能否更好服務(wù)的關(guān)鍵?!?/span>
因此,在考慮傳感器的探測(cè)能力時(shí)必須要全面。包括能否提供路測(cè)車隊(duì)來(lái)收集大量數(shù)據(jù),能否整合傳感器與數(shù)據(jù),并將傳感器整合到數(shù)據(jù)引擎中,實(shí)現(xiàn)數(shù)據(jù)不同部分的快速搜索,之后不斷改進(jìn)所使用的模型。
厘米級(jí)地圖:沒(méi)必要!
當(dāng)被問(wèn)及如何看待其他公司制作運(yùn)營(yíng)地區(qū)的自動(dòng)駕駛汽車高清地圖時(shí),Karpathy表示:「太瘋狂了!」
「我們一直在談?wù)撟詣?dòng)駕駛?cè)绾胃淖兪澜?,談?wù)撊蚍秶鷥?nèi)該技術(shù)如何運(yùn)用到交通領(lǐng)域。如果你需要持續(xù)提供一個(gè)厘米級(jí)精準(zhǔn)的世界或城市地圖,并保持更新頻率,這個(gè)成本太大了。」
當(dāng)Lex問(wèn)這種做法是否會(huì)擴(kuò)展到美國(guó)的全部地區(qū)時(shí),Karpathy用特斯拉的例子現(xiàn)身說(shuō)法:「人們不需要如此高精度的地圖。一個(gè)低精度的地圖足以展現(xiàn)路況和前方路段等關(guān)鍵信息。駕駛者可以像看谷歌地圖一樣,通過(guò)這些關(guān)鍵信息理解自己所處環(huán)境。」
「特斯拉在駕駛系統(tǒng)中使用和谷歌地圖類似分辨率的信息。但不會(huì)預(yù)先繪制厘米級(jí)精度的地圖。這種做法畫蛇添足,費(fèi)力不討好,還稀釋了團(tuán)隊(duì)能力,讓技術(shù)人員無(wú)法專注于真正必要的東西,那就是計(jì)算機(jī)視覺(jué)問(wèn)題?!?/span>
離職后還會(huì)回來(lái)?這就是愛(ài)
在談及為何離開特斯拉時(shí),Karpathy表示這是個(gè)艱難的決定。雖然特斯拉還未完全實(shí)現(xiàn)自動(dòng)化駕駛,但研發(fā)團(tuán)隊(duì)已經(jīng)可以自行發(fā)展。這次離職也給他一個(gè)機(jī)會(huì),去重新審視自己對(duì)于人工智能、開源和教育的熱愛(ài)。
此前,他供職特斯拉已有5年,直接向大老板馬斯克匯報(bào),在特斯拉的一眾高管中,絕對(duì)算得上是老資格了。據(jù)報(bào)道,此前這位李飛飛的高徒已經(jīng)休假了幾個(gè)月時(shí)間,之前還曾說(shuō)過(guò),近期結(jié)束休假后就將重返特斯拉,結(jié)果直接宣布離職了。
Karpathy表示:「很高興在過(guò)去5年里協(xié)助特斯拉一起實(shí)現(xiàn)了眾多目標(biāo),離開的決定其實(shí)是個(gè)艱難的選擇。這5年里,自動(dòng)駕駛完成了『畢業(yè)』,從蹣跚尋路開始,開上了城市的街頭。我無(wú)比期待未來(lái)更強(qiáng)大的自動(dòng)駕駛團(tuán)隊(duì)能夠繼續(xù)輝煌下去?!?/span>
關(guān)于離職之后的未來(lái)打算,他表示:「未來(lái)還沒(méi)什么具體的計(jì)劃,可能回歸自己擁有長(zhǎng)期熱情的領(lǐng)域,比如AI技術(shù)工作、開源和教育等?!?/span>
當(dāng)然,他在訪談中也提到重回特斯拉的可能性:「或許在某個(gè)時(shí)候我會(huì)回來(lái),在特斯拉從事Optimus或AGI(通用人工智能)的工作。特斯拉將是一個(gè)了不起的公司,可以創(chuàng)造非凡。在這個(gè)大規(guī)模的機(jī)器人公司,有才華的設(shè)計(jì)師們正創(chuàng)造前所未有的新事物。」
從特斯拉高管到網(wǎng)紅老師,Karpathy可以為了人工智能離開特斯拉,也可以為了人形機(jī)器人和AGI有朝一日重返崗位。他追求的不是物質(zhì)與地位,而是技術(shù)的不斷進(jìn)步。這和其導(dǎo)師李飛飛畢業(yè)后拒絕轉(zhuǎn)行,堅(jiān)守計(jì)算機(jī)圖像識(shí)別研究的行為異曲同工?;蛟S,這就是「有其師必有其徒」吧!