全球首個(gè)芯片設(shè)計(jì)開源大模型誕生!5年重塑5000億美元半導(dǎo)體行業(yè)
全球首個(gè)專為芯片設(shè)計(jì)專用的AI開源大模型誕生了!
今天,在Semicon West 2024大會(huì)上,Aitomatic發(fā)布了首個(gè)SemiKong半導(dǎo)體行業(yè)設(shè)計(jì)的新模型,將革新半導(dǎo)體工藝和制造技術(shù)。
SemiKong是由Aitomatic與FPT Software合作開發(fā),在處理行業(yè)特定任務(wù)時(shí),表現(xiàn)優(yōu)于通用大模型,如GPT和 Llama 3。
https://www.semikong.ai/
這家公司表示,SemiKong有望在未來五年內(nèi),重塑價(jià)值5000億美元的半導(dǎo)體行業(yè)。
LeCun大佬隨即轉(zhuǎn)發(fā)了這一開源芯片設(shè)計(jì)的AI模型。
新模型的代碼權(quán)重已經(jīng)放在的Hugging Face、GitHub上,供所有人下載。
地址:https://github.com/aitomatic/semikong?tab=readme-ov-file
Aitomatic的CEO Christopher Nguyen表示,公司選擇開源的做法,在因競(jìng)爭(zhēng)保密而臭名昭著的半導(dǎo)體行業(yè),屬于史無前例的一件大事!
在他們看來,在基礎(chǔ)層共享研發(fā)成功的好處,遠(yuǎn)遠(yuǎn)超過保密帶來的價(jià)值。同時(shí),他們也希望看到在公司/工具/工藝/設(shè)備特定層以上的專有差異化和競(jìng)爭(zhēng)。
最后,CEO感謝了為這種工業(yè)規(guī)模合作做出貢獻(xiàn)的AI Alliance成員,并且著重感謝了Llama-3這樣的開源基礎(chǔ)模型,同時(shí)向LeCun等人表示致意。
Llama 3微調(diào),8B參數(shù)
根據(jù)官網(wǎng)的介紹,SemiKong模型專門接受過半導(dǎo)體領(lǐng)域知識(shí)的訓(xùn)練。
它基于Llama 3 Instruct微調(diào)而來。從放出的代碼權(quán)重,可以看出SemiKong有8B的參數(shù)。
SemiKong的訓(xùn)練過程主要分為3個(gè)主要階段:預(yù)訓(xùn)練領(lǐng)域知識(shí)——自我微調(diào)(指令數(shù)據(jù)集)——合并和量化。
在行業(yè)相關(guān)的基準(zhǔn)上,SemiKong優(yōu)于許多通用LLM。而且,為那些打造適合自身的專有模型的芯片公司,提供了一個(gè)有價(jià)值的基座。
SemiKong在準(zhǔn)確性、相關(guān)性和對(duì)半導(dǎo)體工藝的理解上,得到了顯著的改進(jìn)。
如今業(yè)內(nèi)愈發(fā)公認(rèn),即使是小模型,在特定領(lǐng)域的應(yīng)用中也能超越更大的通用模型。
顯然,無論是在加速創(chuàng)新還降低成本方面,8B的SemiKong在整個(gè)半導(dǎo)體價(jià)值鏈中都潛力極大。
CEO Christopher Nguye在一份聲明中表示,「SemiKong將重新定義半導(dǎo)體制造。由AI Alliance推動(dòng)的這種開放創(chuàng)新模式,利用了集體智慧來應(yīng)對(duì)行業(yè)特定的挑戰(zhàn)。在Aitomatic,我們正使用SemiKong創(chuàng)建特定領(lǐng)域的AI智能體,以前所未有的效率解決復(fù)雜的制造問題」。
SemiKong的出現(xiàn),可以逐漸降低半導(dǎo)體生產(chǎn)成本,未來幾年內(nèi)消費(fèi)者可能會(huì)看到更強(qiáng)大的智能手機(jī)、筆記本電腦和智能家居設(shè)備以更低的價(jià)格上市。
下一個(gè)更強(qiáng)大的SemiKong版本計(jì)劃在今年12月推出,首個(gè)針對(duì)工藝特定模型預(yù)計(jì)在9月發(fā)布。
半導(dǎo)體行業(yè),進(jìn)入新時(shí)代
SemiKong的誕生,背后離不開人工智能聯(lián)盟的托舉。
而CEO Christopher Nguyen本人,也是AI Alliance的領(lǐng)導(dǎo)者之一。
IBM 研究院AI開放創(chuàng)新負(fù)責(zé)人Anthony Annunziata強(qiáng)調(diào):「AI聯(lián)盟的開放協(xié)作模式,是實(shí)現(xiàn)這一突破的關(guān)鍵。SemiKong DRAFT v0.6的誕生表明,匯集不同的專業(yè)知識(shí)能推動(dòng)半導(dǎo)體制造等關(guān)鍵行業(yè)的重大進(jìn)步。」
與之相關(guān)的業(yè)內(nèi)人士,紛紛對(duì)SemiKong予以極高的贊許。
東京電子與人工智能聯(lián)盟產(chǎn)品生命周期管理總監(jiān)Atsushi Suzuki表示:「作為與人工智能聯(lián)盟合作的行業(yè)專家,我相信SemiKong代表著人工智能在半導(dǎo)體制造領(lǐng)域的應(yīng)用向前邁出了重要一步?!?/span>
東京電子公司的高級(jí)專家、半導(dǎo)體的早期提出者Daisuke Oku表示:「SemiKong是半導(dǎo)體開源人工智能一段激動(dòng)人心旅程的開始。Aitomatic的創(chuàng)新方法,有潛力為我們的行業(yè)帶來巨大飛躍?!?/span>
FPT Software首席人工智能官Phong Nguyen表示:「FPT Software很高興能夠成為其中的一部分,我們渴望探索該模型的潛在應(yīng)用,特別是激發(fā)全球人工智能和半導(dǎo)體的融合。我們相信,我們的參與將鞏固FPT Software作為全球半導(dǎo)體行業(yè)未來領(lǐng)跑者的地位?!?/span>