AI無(wú)人商店背后，是上千個(gè)印度人通過(guò)攝像頭看美國(guó)人買西藍(lán)花？
請(qǐng)?jiān)L問(wèn)： 51CTO AI.x社區(qū)
人們常說(shuō)，有多少智能，就有多少人工。但是，亞馬遜的這個(gè)項(xiàng)目，人工含量似乎有點(diǎn)高。
這個(gè)項(xiàng)目名叫「Just Walk Out」。就像它的名字所暗示的，你可以走進(jìn)亞馬遜的無(wú)人購(gòu)物商店里，選好東西，然后直接走出去，無(wú)需排隊(duì)等待結(jié)賬。因?yàn)?，通過(guò)與計(jì)算機(jī)視覺(jué)和深度學(xué)習(xí)算法相結(jié)合，Just Walk Out 技術(shù)能夠準(zhǔn)確識(shí)別你拿取的商品，并完成結(jié)算，整個(gè)過(guò)程非常省心，聽起來(lái)也很智能。
但是，事實(shí)可能并非如此。據(jù)外媒 The Information 報(bào)道，「Just Walk Out」其實(shí)要依靠來(lái)自印度的一個(gè)千人團(tuán)隊(duì)來(lái)觀看和標(biāo)記視頻，以確保準(zhǔn)確的結(jié)算結(jié)果。從 2022 年的數(shù)據(jù)來(lái)看，每 1000 筆交易就有 700 筆需要該團(tuán)隊(duì)審核，而亞馬遜原本希望這一數(shù)字是 20~50 筆。
Just Walk Out 于 2016 年首次推出，展示了亞馬遜在雜貨店購(gòu)物方面最大膽的創(chuàng)新。它最大的好處是不用采集顧客生物識(shí)別信息，可以免去很多隱私方面的擔(dān)憂。
在 2023 年 9 月發(fā)布的一篇介紹文章中，亞馬遜寫到，「Just Walk Out 是計(jì)算機(jī)視覺(jué)、目標(biāo)識(shí)別、高級(jí)傳感器、深度機(jī)器學(xué)習(xí)模型和生成式人工智能的結(jié)合。亞馬遜研究人員找到了一種方法，使這些技術(shù)在后臺(tái)無(wú)縫地協(xié)同工作。如此一來(lái)，商店幾乎可以立即弄清楚哪個(gè)顧客拿了金槍魚三明治，哪個(gè)拿了雞肉沙拉，然后算出正確的費(fèi)用，并讓顧客拿著東西離開?！?/span>
具體來(lái)說(shuō)，采用 Just Walk Out 的商店會(huì)在天花板上安裝幾個(gè)專用攝像頭。在購(gòu)物者進(jìn)入商店后，該技術(shù)會(huì)為他們分配一個(gè)臨時(shí)數(shù)字代碼。當(dāng)他們離開時(shí)，代碼會(huì)消失。如果他們回來(lái)，他們會(huì)得到一個(gè)新代碼。
在購(gòu)物時(shí)，Just Walk Out 可以檢測(cè)購(gòu)物者的手何時(shí)與貨架上的商品互動(dòng)。在產(chǎn)生互動(dòng)后，算法會(huì)將商品放入虛擬購(gòu)物車。如果購(gòu)物者把東西放回貨架，系統(tǒng)也會(huì)進(jìn)行相應(yīng)調(diào)整。此外，該技術(shù)還會(huì)提醒店員將放錯(cuò)地方的物品放回去。對(duì)于較小、難以看到的產(chǎn)品，如口香糖或口紅，貨架上的重量傳感器會(huì)檢測(cè)顧客何時(shí)拿起東西。
亞馬遜表示，為了訓(xùn)練這個(gè)系統(tǒng)，他們創(chuàng)建了一個(gè)合成數(shù)據(jù)集。該數(shù)據(jù)集包含數(shù)百萬(wàn)張 AI 生成的合成圖片和視頻剪輯，模仿了真實(shí)的、有時(shí)甚至是罕見的購(gòu)物場(chǎng)景。
這項(xiàng)技術(shù)在需要快捷購(gòu)物的體育賽事場(chǎng)景中非常有效。根據(jù)亞馬遜的數(shù)據(jù)，在 2022 年 9 月安裝 Just Walk Out 技術(shù)后，District Market（一家提供啤酒、蘇打水、比賽日小吃的便利店）的銷售額比同一地點(diǎn)的前一家商店多了一倍，球迷滿意度調(diào)查得分創(chuàng)下歷史新高。
在過(guò)去的幾年里，亞馬遜已經(jīng)將 Just Walk Out 推廣到大型商店。目前，44 家 Amazon Fresh（亞馬遜旗下生鮮商店）中有 27 家擁有這項(xiàng)技術(shù)。亞馬遜還在一些 Whole Foods（亞馬遜旗下連鎖超市）添加了 Just Walk Out。
但 The Information 記者 Theo Wayt 在 2023 年的一份報(bào)道中指出，亞馬遜尚未在一家不屬于自己的大型商店中部署這項(xiàng)技術(shù)，因?yàn)樗某杀緦?shí)在是太高了：首先，引入該技術(shù)的超市要進(jìn)行升級(jí)改造，這意味著要停業(yè)一段時(shí)間，每家商店的掃描儀和攝像機(jī)系統(tǒng)也非常昂貴；其次，工作人員需要確保商店貨架保持整齊，以便掃描技術(shù)能夠發(fā)揮作用。
更要命的是，亞馬遜仍然依靠大量的人力在幕后為 Just Walk Out 保駕護(hù)航。一位技術(shù)人員表示，截至 2022 年年中，亞馬遜在印度有 1000 多人在為 Just Walk Out 工作，他們的工作包括人工審核交易和標(biāo)注視頻中的圖像，以訓(xùn)練 Just Walk Out 的機(jī)器學(xué)習(xí)模型。該人士說(shuō)，對(duì)后臺(tái)人員的依賴在一定程度上解釋了為什么顧客走出商店后需要幾個(gè)小時(shí)才能收到收據(jù)。這樣的延遲可能會(huì)讓精打細(xì)算的購(gòu)物者感到不安。
但亞馬遜的發(fā)言人在一定程度上反駁了該說(shuō)法，稱 The Information「對(duì)人工審核員的角色和數(shù)量的描述并不準(zhǔn)確」，但沒(méi)有說(shuō)明亞馬遜使用了多少審核員。這位發(fā)言人表示，印度員工的主要職責(zé)是機(jī)器學(xué)習(xí)數(shù)據(jù)助理，除了驗(yàn)證購(gòu)買情況外，還負(fù)責(zé)注釋視頻圖像，幫助公司訓(xùn)練模型。
不過(guò)，時(shí)隔一年，亞馬遜似乎也扛不住了。
在 The Information 的一篇新報(bào)道中，Theo Wayt 指出，亞馬遜準(zhǔn)備在新開的一批雜貨店中放棄 Just Walk Out，轉(zhuǎn)用帶有屏幕和掃描儀的 Dash Carts 智能購(gòu)物車結(jié)賬。這種購(gòu)物車可以實(shí)時(shí)顯示購(gòu)物支出，比 Just Walk Out 更可靠。
這篇報(bào)道讓 Just Walk Out 背后的千人印度團(tuán)隊(duì)重新吸引了人們的注意。對(duì)于這種購(gòu)物時(shí)有人看著的感覺(jué)，很多人感覺(jué)不自在，對(duì)一些「智能」設(shè)備的濾鏡也是碎了一地。
也有人比較樂(lè)觀，覺(jué)得亞馬遜確實(shí)在靠這個(gè)團(tuán)隊(duì)改進(jìn) AI 算法，只是進(jìn)展不太順利。「想象 1000 個(gè)家伙看著美國(guó)人購(gòu)買西蘭花還是很有趣的」。
在事件發(fā)酵后，亞馬遜發(fā)言人不得不再次出來(lái)辟謠。
「認(rèn)為Just Walk Out技術(shù)依賴于人類審核員在印度現(xiàn)場(chǎng)看著購(gòu)物者的說(shuō)法具有誤導(dǎo)性和不準(zhǔn)確性，」亞馬遜發(fā)言人在給USA TODAY的電子郵件聲明中表示。「與許多人工智能系統(tǒng)一樣，底層機(jī)器學(xué)習(xí)模型通過(guò)生成合成數(shù)據(jù)和注釋實(shí)際視頻數(shù)據(jù)來(lái)不斷改進(jìn)?！?/span>
「我們的員工會(huì)通過(guò)查看錄制的視頻片段來(lái)驗(yàn)證一小部分購(gòu)物訪問(wèn)，以確保我們的系統(tǒng)能夠達(dá)到我們的高準(zhǔn)確性標(biāo)準(zhǔn)，這是因?yàn)槲覀儾粩喔倪M(jìn)算法，并利用人工輸入來(lái)糾正算法?！惯@位發(fā)言人補(bǔ)充說(shuō)。
作為兩篇報(bào)道的作者，Theo Wayt 極力發(fā)聲明說(shuō)報(bào)道的內(nèi)容被社交媒體扭曲了。不過(guò)，他也認(rèn)為，這個(gè)故事傳播了一個(gè)基本事實(shí)：許多華而不實(shí)的 AI 背后仍需要人工。
從目前的消息來(lái)看，亞馬遜似乎還沒(méi)有打算完全放棄 Just Walk Out。他們會(huì)在一些 Fresh 商店、Amazon Go 便利店以及一些體育場(chǎng)管中保留這項(xiàng)技術(shù)。
