又有一家科技巨頭向全世界公開了他們的 know-how 人工智能。2月25日，Yahoo 發(fā)布了 CaffeOnSpark 人工智能的源代碼，每個(gè)學(xué)術(shù)研究人員或是大公司都可以使用或是加以修改。

[[163190]]

Yahoo 在科技方面的實(shí)力大概鮮有人知。事實(shí)上開源 Hadoop 就是 Yahoo 孵化的；Facebook、Twitter 以及其他不少公司都在用這個(gè)數(shù)據(jù)處理平臺(tái)。因此在人工智能方面，Yahoo 公司有著獨(dú)到的長(zhǎng)處，因?yàn)樵谂嘤?xùn)人工智能系統(tǒng)的時(shí)候，數(shù)據(jù)就和算法一樣重要。而且 Yahoo 手握著全球最有趣***的資料庫(kù)之一：相片社群網(wǎng)站 Flickr。

就如諸多新的開源人工智能項(xiàng)目一樣，CafffeOnSpark 的根基是深度學(xué)習(xí)。深度學(xué)習(xí)是人工智能的一個(gè)分支，以其人類語音、照片和視頻等的識(shí)別能力見長(zhǎng)。Yahoo 就是用這項(xiàng)技術(shù)來識(shí)別照片中的不同內(nèi)容，以此改良 Flickr 網(wǎng)站的搜索結(jié)果。與其他網(wǎng)站不同，F(xiàn)lickr 的圖片搜索并不是靠圖片描述或是用戶輸入的關(guān)鍵詞。Yahoo 會(huì)教電腦如何識(shí)別照片的某種特征，例如特定的顏色，甚至是物體或動(dòng)物。

在最近幾個(gè)月里，Google 開放了深度學(xué)習(xí)網(wǎng)絡(luò) TensorFlow 的源代碼，Microsoft 開放了類似的網(wǎng)絡(luò) CNTK，F(xiàn)acebook 分享了人工智能硬件設(shè)計(jì)，中國(guó)搜索引擎巨頭百度也公開了深度學(xué)習(xí)訓(xùn)練軟件。

這些開源技術(shù)項(xiàng)目都各自有所側(cè)重，偏向不同。例如 Yahoo 的目的是要在現(xiàn)存的系統(tǒng)上運(yùn)行深度學(xué)習(xí)，避免把數(shù)據(jù)從一個(gè)地方傳輸?shù)搅硪粋€(gè)地方。Yahoo 的構(gòu)架副總裁 Andy Fent 向我們解釋，訓(xùn)練深度學(xué)習(xí)系統(tǒng)識(shí)別圖片需要巨量的數(shù)據(jù)信息。你得往算法里放大量的例子，越多越好，比如如果是一只貓的話，系統(tǒng)要足夠的圖才會(huì)「學(xué)會(huì)」辨認(rèn)貓之間的共同特征，分辨貓和其他動(dòng)物。

Flickr 網(wǎng)站上有成千上萬張圖片，足夠拿來訓(xùn)練人工智能了。但是開發(fā)團(tuán)隊(duì)不想把這些圖片從 Flickr 服務(wù)器傳送到另一層運(yùn)行深度學(xué)習(xí)軟件的服務(wù)器里。于是他們發(fā)明了在已有的構(gòu)架上運(yùn)行深度學(xué)習(xí)軟件的方法。

從名字上看，CaffeOnSpark 結(jié)合了兩種現(xiàn)有的科技：深度學(xué)習(xí)框架 Caffe 和大規(guī)模數(shù)據(jù)處理系統(tǒng) Spark。Yahoo 所做的就是想辦法在 Spark 層次上運(yùn)行 Caffe。找到方法后，Caffe 不僅可以在 Spark 上運(yùn)行，還可以兩者一起在 Hadoop 上運(yùn)行。Yahoo 的開發(fā)不僅會(huì)讓人工智能開發(fā)者用更簡(jiǎn)單熟悉的工具、省去傳送數(shù)據(jù)的麻煩過程，還能讓深度學(xué)習(xí)更方便地同時(shí)處理數(shù)個(gè)服務(wù)器的內(nèi)容。Feng 還特意告訴我們，這一點(diǎn) Google 的 TensorFlow 目前還做不到，Yahoo 領(lǐng)先了一步。

Feng 說到，去年團(tuán)隊(duì)在博客上發(fā)表了有關(guān) CaffeOnSpark 的帖子后，不少公司都希望 Yahoo 開放 CaffeOnSpark 的源代碼。于是他們發(fā)現(xiàn)，不少公司其實(shí)服務(wù)器上都已經(jīng)具備了不少信息，但是他們不想傳送。