WOT2016崔燦:帶你了解不一樣的百度開放云存儲
原創(chuàng)現(xiàn)在不論國內(nèi)外,云計算已經(jīng)成為任何一家大型互聯(lián)網(wǎng)公司的戰(zhàn)略級產(chǎn)品,云計算能力成為互聯(lián)網(wǎng)公司打造生態(tài)的重要因素。目前,百度開放云已擁有包括云計算基礎(chǔ)服務(wù)、大數(shù)據(jù)分析、人工智能、云服務(wù)器BCC、對象存儲BOS、內(nèi)容分發(fā)網(wǎng)絡(luò)CDN等全系列云產(chǎn)品。它是和阿里云、騰訊云一樣的公有云服務(wù)平臺,而云存儲是其中重要的組成部分。
本次51CTO記者特別采訪了【WOT2016互聯(lián)網(wǎng)運維與開發(fā)者峰會】特邀講師、百度開放云資深工程師崔燦,他將分享百度開放云存儲的定義、發(fā)展歷程中的關(guān)鍵節(jié)點和它的競爭優(yōu)勢等內(nèi)容。
講師介紹
崔燦 百度開放云資深工程師
崔燦,百度開放云資深工程師,主要負責(zé)百度開放云存儲(對象存儲、塊存儲)以及百度開放云CDN的設(shè)計及研發(fā)工作。在加入百度之前,他分別在淘寶和騰訊從事搜索廣告系統(tǒng)的研發(fā)工作。
百度開放云的技術(shù)實力來自百度強大的技術(shù)基因。多年來,百度在云計算、大數(shù)據(jù)、人工智能上的綜合優(yōu)勢,成為百度開放云崛起的主要源動力。
“百度云”和“百度開放云”的云存儲定義
百度的云生態(tài)主要包括面向個人用戶的百度云和面向開發(fā)者和企業(yè)用戶的百度開放云。其中,百度云因為面向個人用戶,大家的日常使用已經(jīng)非常熟悉;而百度開放云為企業(yè)用戶提供了一整套的基礎(chǔ)設(shè)施和云解決方案,包括彈性計算、存儲、數(shù)據(jù)庫、數(shù)據(jù)分發(fā)等云計算服務(wù),目標(biāo)是幫助企業(yè)降低IT投入成本和維護成本。
那么,大家廣泛意義上理解的“百度云”和“百度開放云”中的云存儲定義,有哪些相同點和不同點呢?百度開放云對象存儲是是一個面向開發(fā)者的云存儲服務(wù),它提供了存儲系統(tǒng)的一個基本的抽象,包括名字空間、數(shù)據(jù)存取、權(quán)限、統(tǒng)計和審計等基本的功能,并且為開發(fā)者提供API,SDK等多種工具來幫助開發(fā)者使用。開發(fā)者可以在開放云對象存儲的基礎(chǔ)上開發(fā)自己的系統(tǒng),如在線視頻、音樂播放,網(wǎng)盤,日志系統(tǒng)等。
百度云也就是我們通常所說的百度網(wǎng)盤,是百度在2012年推出的一項云存儲服務(wù),目前已覆蓋多個主流PC和手機操作系統(tǒng)。它為個人用戶提供文件的存儲服務(wù),是用戶十分熟悉的應(yīng)用。百度云使用開放云存儲作為底層的存儲,更多的關(guān)注點在最終用戶的使用上面,比如多客戶端的文件上傳、下載,文件的分享以及預(yù)覽等。
百度開放云存儲技術(shù)的發(fā)展歷程中有哪些關(guān)鍵節(jié)點和事件呢?
讓我們從以下幾個時間節(jié)點上,來具體看下:
1.2012年9月,百度面向開發(fā)者全面開放包括云存儲、大數(shù)據(jù)智能和云計算在內(nèi)的核心云能力,為開發(fā)者提供強大的技術(shù)運營支持與推廣變現(xiàn)保障。
2.2013年,為了應(yīng)對百度云數(shù)據(jù)的迅速增長,降低存儲成本,百度云存儲團隊設(shè)計研發(fā)了更低成本的對象存儲系統(tǒng),該系統(tǒng)于2014年初逐步上線。
3.2014年9月,百度對象存儲系統(tǒng)云服務(wù)化,百度內(nèi)部業(yè)務(wù)開始遷移至對象存儲系統(tǒng)。
4.2015年4月,百度開放云正式商用,開放云對象存儲系統(tǒng)-BOS,同時正式對外部開發(fā)者開放。
5.2016年初,云對象存儲系統(tǒng)BOS正式對外支持多地區(qū),在北京、廣州、香港三地提供服務(wù)。
相對于國內(nèi)外競爭對手的發(fā)展,百度開放云存儲技術(shù)的競爭優(yōu)勢
在用戶日常的云存儲使用上,主要面臨兩個問題,一個是用戶使用云服務(wù),涉及到數(shù)據(jù)和服務(wù)遷移到云存儲的成本核算;一個是用戶對云存儲狀態(tài)的熟悉把握和對異常情況的處理。
和國內(nèi)外競爭對手相比,百度開放云對象存儲的正式發(fā)布雖然相對較晚,但是依托于百度內(nèi)部多年的技術(shù)積累,他們在功能、性能和穩(wěn)定性等方面都不弱于國內(nèi)友商。從用戶接入上來說,百度開放云存儲官方提供了多種協(xié)助用戶遷移數(shù)據(jù)和服務(wù)到云存儲的方式,比如多種源(http等協(xié)議)的方式高并發(fā)的導(dǎo)入數(shù)據(jù)到對象存儲BOS,目前該工具已經(jīng)導(dǎo)入了數(shù)P的數(shù)據(jù)到對象存儲BOS。同時,針對大量數(shù)據(jù)的硬盤傳輸或者帶寬受限的環(huán)境,也可以實現(xiàn)遷移多個業(yè)務(wù)上云。
崔燦表示百度云存儲重點關(guān)注存儲的易用性、穩(wěn)定性/成本和安全三個方面,并對這三個方面進行了詳細說明。
1.從用戶使用方面來說,百度開放云存儲組建了強大的TS團隊,其中有大量的工程師、架構(gòu)師參與來幫助用戶找到***的使用方式。
2.從穩(wěn)定性/成本方面來說,開放云存儲和百度網(wǎng)盤、百度文庫使用相同的后臺架構(gòu),已經(jīng)支持了數(shù)百P數(shù)據(jù)長期可靠的存儲,而且是達到11個9的數(shù)據(jù)可靠性,這個已經(jīng)是很高比例的基本可靠保障了。這里特別需要提到的是百度開放云存儲提供了冷存儲服務(wù),使用自有專利的低成本存儲服務(wù)器,可以在和競爭對手相近的成本前提下,提供優(yōu)質(zhì)的在線服務(wù)能力。
3.安全也是百度開放云存儲的重點關(guān)注方向,它提供了靈活的鑒權(quán),授權(quán)機制,比如STS和URL鑒權(quán)和授權(quán)機制,以及白名單、防盜鏈,主子賬號功能等。除此之外,開放云存儲即將提供自定義域名的HTTPS支持、服務(wù)端加密等多種特性,進一步保證用戶數(shù)據(jù)的安全。
百度開放云存儲未來的發(fā)展方向
目前,百度開放云存儲的整體策略是提供全面的產(chǎn)品系列,并且結(jié)合百度內(nèi)部的優(yōu)質(zhì)資源,提供完整的解決方案。開放云存儲的優(yōu)勢解決方案主要涉及以下幾個方面:
1.結(jié)合百度媒體處理經(jīng)驗的積累,提供完整的媒體、圖片處理解決方案。
2.結(jié)合百度數(shù)據(jù)分析的日常積累,提供數(shù)據(jù)處理解決方案。
3.基于百度網(wǎng)盤、百度文庫低成本存儲的積累,提供”溫”存儲解決方案,即在線的低成本存儲服務(wù)。
百度開放云內(nèi)部產(chǎn)品線間如何分工協(xié)作
百度開放云的基本策略是為開發(fā)者提供完整的解決方案,如媒體云,Iot等。日常工作中,云存儲團隊的工作職責(zé)劃分是垂直的,具體根據(jù)解決方案來進行劃分,多個解決方案依賴于統(tǒng)一的基礎(chǔ)產(chǎn)品(存儲、網(wǎng)絡(luò)、虛擬機等)。一般來說,各個垂直解決方案之間的互相依賴相對較少,并不需要較多的協(xié)作。
基礎(chǔ)產(chǎn)品和垂直解決方案之間的協(xié)作主要靠定期查看各個解決方案的需求和優(yōu)先級,結(jié)合基礎(chǔ)產(chǎn)品本身的演進來制定規(guī)劃。
相信百度開放云存儲在強大技術(shù)實力的支持下,會越走越好!那么,崔燦眼里的優(yōu)秀存儲工程師是怎樣的呢?他認為優(yōu)秀的存儲工程師首先要有責(zé)任心,對用戶交給的數(shù)據(jù)要負責(zé)。二是要耐得住寂寞,存儲系統(tǒng)是一個超大型的,需要不斷調(diào)優(yōu)的系統(tǒng),需要長時間靜下心來不斷對系統(tǒng)作觀察和優(yōu)化。三是保持好奇心和強烈的求知欲。
***,記者詢問崔老師將在WOT互聯(lián)網(wǎng)運維和開發(fā)者峰會上將分享哪些內(nèi)容?他表示將分享實現(xiàn)低成本對象存儲時要做的必要工作,以及開放對象存儲服務(wù)中遇到的挑戰(zhàn)和應(yīng)對方案。干貨多多,敬請期待!