自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

新聞 前端
PyTorch總體的發(fā)展方向也和Julia的愿景一致,也就是同時具備拓展性、易用性和執(zhí)行性能。

 [[438705]]

本文經(jīng)AI新媒體量子位(公眾號ID:QbitAI)授權(quán)轉(zhuǎn)載,轉(zhuǎn)載請聯(lián)系出處。

PyTorch社區(qū)最近有一種聲音:下個版本應(yīng)該拋棄Python改用Julia語言。

現(xiàn)在就連PyTorch團(tuán)隊(duì)內(nèi)部也會拿這個說法來開玩笑。

對這個問題,核心開發(fā)成員中的Edward Yang在論壇上作出過一些回應(yīng)。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

他認(rèn)為PyTorch的確越來越像Julia了,比如借鑒Julia的多重分派特性開發(fā)了Pytorch Dispatcher。

PyTorch總體的發(fā)展方向也和Julia的愿景一致,也就是同時具備拓展性、易用性和執(zhí)行性能。

一方面PyTorch的底層代碼后期用C++重寫以獲得更好的性能,另一方面functorch、fx等新功能又讓用戶可以直接使用Python做以前必須借助C++完成的工作。

那為什么不直接改用Julia呢?

害,其實(shí)是舍不得Python那無可替代的生態(tài)。

當(dāng)初從原版Torch使用的Lua改用Python就是看中了生態(tài)這一點(diǎn)。這么多年過去了其他語言生態(tài)連一點(diǎn)可能超過Python的跡象都沒有。

簡而言之,Julia語言本身的特性和Python的生態(tài)他們全都要,向Julia的優(yōu)點(diǎn)學(xué)習(xí)也是團(tuán)隊(duì)未來的努力方向。

[[438706]]

那么,Julia這種語言到底好在哪,讓PyTorch開發(fā)團(tuán)隊(duì)都向它學(xué)習(xí)?

面向科學(xué)計(jì)算設(shè)計(jì)的語言

Julia來自麻省理工CSAIL實(shí)驗(yàn)室,設(shè)計(jì)初衷就是想要一個既有C的速度又有Ruby的動態(tài)性、既能像Matlab一樣使用數(shù)學(xué)表達(dá)式又有Python的通用性。

Julia要能像Perl一樣自然地處理字符串、像R一樣適用于統(tǒng)計(jì),像Shell一樣作為膠水語言去和其他語言交互。

要有Hadoop的并行計(jì)算能力,又不想要那些繁雜的配置。

最后做出來的Julia采用即時編譯(Just In Time),速度比需要解釋器的Python快得多,又沒有失去交互性。

通過多重分派(Multiple Dispatch)特性來實(shí)現(xiàn)類型穩(wěn)定又不時腳本語言的簡潔靈活。

同一個函數(shù)名對不同參數(shù)類型的調(diào)用分派不同的操作,因?yàn)檫m合處理多種數(shù)據(jù)類型還被PyTorch給學(xué)了去。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

具體到機(jī)器學(xué)習(xí)來說,Julia執(zhí)行各類算法包括矩陣運(yùn)算的速度都比Python快得多。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

Julia生態(tài)里也有自己的開源深度學(xué)習(xí)框架Julia Flux。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

此外Julia還在語法上對線性代數(shù)、數(shù)據(jù)處理這些場景有額外的優(yōu)化。

比如支持Unicode數(shù)學(xué)符號,數(shù)字乘以變量時候可以省略「*」,以及索引從1而不是0開始更符合人類直覺….

Julia代碼可以寫成這樣:

  1. α = 0.5  
  2. ∇f(u) = α*u; ∇f(2)  
  3. sin(2π) 

以至于有些數(shù)學(xué)背景的開發(fā)者認(rèn)為,Julia代碼寫起來就像在黑板上做數(shù)學(xué)題一樣的,很親切。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

相比之下,用Python做矩陣運(yùn)算感覺就……不是那么好。

Python:

  1. np.dot(array1,array2) 

Julia:

  1. array1 .* array2 

Julia的歷史可以追溯到2009年,由于想實(shí)現(xiàn)的功能太多,直到2018年才對外發(fā)布1.0正式版。

不過最近幾年Julia已迅速被金融、醫(yī)藥、航天等一些行業(yè)接受,使用者包括摩根大通、輝瑞、NASA等。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

△ TIOBE指數(shù)中的Julia流行趨勢變化

Julia改變了過去他們只能用C等高性能語言做底層開發(fā)、同時用高易用性的Python等語言做擴(kuò)展開發(fā)的割裂問題。

今年7月,Julia創(chuàng)始團(tuán)隊(duì)成立的公司Julia Computing還獲得2400萬美元的A輪融資。

Julia語言速度快、天生適合機(jī)器學(xué)習(xí)又在高速成長,也難怪PyTorch社區(qū)會有用Julia替代Python的聲音出現(xiàn)。

有人認(rèn)為Python是一種糟糕的語言,雖然有優(yōu)秀的生態(tài),但生態(tài)中對機(jī)器學(xué)習(xí)最有價值的部分(Numpy)其實(shí)是用C實(shí)現(xiàn)的。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

Python生態(tài)雖然強(qiáng)大,但人們對其中的混亂也有不少詬病,各種重復(fù)開發(fā)的包管理系統(tǒng)讓配置好Python開發(fā)環(huán)境都不是一件容易事。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

相比之下,Julia的包管理方案就很統(tǒng)一,雖然有可能是還在起步階段沒來得及混亂。

也有人認(rèn)為Python這些所謂的缺點(diǎn)其實(shí)正是它流行的原因。

像Python、Javascript和PHP這種看起來糟糕的語言,正是因?yàn)槟軌蜉p松的編寫糟糕代碼,降低了門檻而流行。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

這位要提醒大家Julia自身就帶有和其他語言的交互功能,他平常會在Julia代碼里調(diào)用Huggingface的Python模型作開發(fā),兩種生態(tài)都用上才是墜吼的。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

最后,有人很不理解PyTorch開發(fā)團(tuán)隊(duì)不選擇遷移到Julia的做法,既然Julia語言有所有他們需要的特性,還要花時間在Python里重新造輪子是自找麻煩。

PyTorch核心開發(fā)者靈魂發(fā)問:我們怎么越來越像Julia了?

另一位的視角有些微妙的不同:

這正是PyTorch團(tuán)隊(duì)想把方便留給用戶,而把麻煩留給自己。對這種態(tài)度我很感激。

 

責(zé)任編輯:張燕妮 來源: 量子位
相關(guān)推薦

2012-05-21 22:01:09

iOS

2015-09-23 10:27:25

2010-07-08 09:03:20

openSUSE 11Fedora

2011-12-01 09:33:17

Google微軟

2018-08-23 07:24:40

MEC多接入邊緣計(jì)算網(wǎng)絡(luò)邊緣

2022-12-13 11:13:34

數(shù)據(jù)傳感器

2023-02-21 09:29:57

ChatGPT人工智能

2022-01-09 23:34:08

Windows 11Windows微軟

2018-03-05 10:40:21

安卓APPGoogle

2021-04-15 13:48:08

視頻監(jiān)控視頻分析智能安防

2019-05-28 16:39:51

LinuxWindowsPython

2023-11-21 14:44:14

AI

2021-09-01 15:50:17

Mac App Sto開發(fā)者蘋果

2012-05-22 09:34:23

蘋果iOS

2021-08-24 00:18:17

人工智能語言編碼

2021-04-28 14:27:16

數(shù)字人民幣貨幣金融

2013-08-01 13:21:47

2024-10-08 14:00:00

2011-03-29 16:30:18

2017-12-26 15:34:55

點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號