亞馬遜云科技:加速云端存儲創(chuàng)新,聚焦智能、專門構建和統(tǒng)一保護
原創(chuàng)當今,每個業(yè)務都應該是數(shù)據(jù)驅動的業(yè)務,從數(shù)據(jù)到云服務,到用戶體驗再到反饋,是一個持續(xù)創(chuàng)新的正循環(huán)的飛輪,在這其中,數(shù)據(jù)在企業(yè)業(yè)務中起著非常重要的作用。數(shù)據(jù)的爆發(fā)性增長,尤其是云上數(shù)據(jù)增長已經(jīng)是新常態(tài)。這就帶來了三大難題。
首先是敏捷和成本之間的挑戰(zhàn),即如何應對海量數(shù)據(jù)增長所帶來的成本急速上升,與數(shù)據(jù)存儲服務敏捷性能之間的矛盾。
第二是數(shù)據(jù)本身多樣化的需求,業(yè)務數(shù)據(jù)來自于各個渠道、各種方式,各個業(yè)務數(shù)據(jù)本身的性質(zhì)不同,所使用的方式也不一樣,如何設計不同的存儲服務來滿足不同業(yè)務的需求是第二大難題。
第三是數(shù)據(jù)安全與合規(guī)的問題。
亞馬遜云服務從2006年推出第一個云存儲服務Amazon S3以來,已經(jīng)擁有了非常豐富、完善的云存儲產(chǎn)品。從塊存儲到對象存儲、文件存儲、備份、容災以及邊緣網(wǎng)絡和數(shù)據(jù)傳輸?shù)却鎯Ψ?,共同組成亞馬遜云科技存儲服務的“全家桶”。而解決以上三大難題,亞馬遜云科技也有著自己的一套方案。
用智能分層來解決敏捷和成本之間的挑戰(zhàn)
亞馬遜云科技從2006年推出第一個對象存儲產(chǎn)品Amazon S3以來,都在不斷優(yōu)化成本,為用戶節(jié)約存儲所需要花的錢?!耙环輸?shù)據(jù)在2006年的時候如果需要100塊錢存儲的話,到了今天只需要花15塊錢,也就是說這16年間,整個存儲成本降低了大約7倍。2021年12月,亞馬遜云科技宣布將全球九大可用區(qū)域的兩個主要產(chǎn)品:Amazon S3 Standard In Frequent Access和Amazon S3 One Zone In Frequent Access價格降低了31%?!?亞馬遜云科技大中華區(qū)產(chǎn)品部總經(jīng)理陳曉建表示,“降低用戶存儲成本是我們非常重視的工作?!眱H僅解決成本問題不能解決存儲本身帶來的所有問題,數(shù)據(jù)來源多種多樣,使用方法也不同,針對熱、溫、冷、凍四個層次的數(shù)據(jù),亞馬遜云科技開發(fā)了多達8層的存儲層級,用戶可以根據(jù)自己的數(shù)據(jù)類型、需要的讀寫性能、可以接受的成本來選擇其中任何一種存儲層級,來應對整個業(yè)務的需求。亞馬遜云科技提供的Amazon S3 Glacie歸檔存儲,價格低廉,一個GB數(shù)據(jù)一個月的存儲成本只要3分錢人民幣,其代價就是讀取這個數(shù)據(jù)可能需要幾分鐘,甚至幾個小時。如果客戶需要秒級甚至毫秒級存儲性能,則可以使用Amazon S3 Standard—IA的 “溫”存儲服務,但是價格比Amazon S3 Glacier貴3倍左右。
亞馬遜云科技大中華區(qū)產(chǎn)品部總經(jīng)理陳曉建
為了兼顧低成本和快速檢索,亞馬遜云科技推出了一個革命性的新產(chǎn)品Amazon S3 Glacier Instant Retrieval,是歸檔存儲的一種。其價格和普通的Glacier相當,但是用戶數(shù)據(jù)的取回速度是毫秒級的,再一次定義了歸檔存儲。
早在2018年,亞馬遜云科技就推出了Amazon S3智能分層功能,面向未知訪問模式的海量數(shù)據(jù)。Amazon S3可以自動在不同層級的存儲之間移動數(shù)據(jù),實現(xiàn)至多68%的成本節(jié)省。Amazon S3智能分層已經(jīng)涵蓋了Amazon S3家族的幾乎所有存儲類別,實現(xiàn)數(shù)據(jù)全生命周期的智能化存儲與使用??蛻艨梢詫mazon S3智能分層作為默認的存儲層級,用以構建包括數(shù)據(jù)湖、機器學習等各種云端應用。據(jù)悉,某國內(nèi)互聯(lián)網(wǎng)公司幾十PB的數(shù)據(jù)通過智能分層在保證數(shù)據(jù)訪問性能不變的情況下節(jié)省了62%的成本。
亞馬遜云科技還將智能分層功能拓展到了共享文件存儲Amazon EFS。Amazon EFS提供四種存儲等級,可節(jié)省高達72%的存儲成本。
專門構建不同的云存儲服務來解決數(shù)據(jù)本身多樣化的需求
針對云原生現(xiàn)代化應用,例如網(wǎng)站托管、數(shù)據(jù)湖、數(shù)字營銷、云相冊、音視頻分享、電商平臺、社交媒體等應用,亞馬遜云科技有云原生Serverless文件存儲Amazon EFS,可以讓用戶獲得簡單、無管理成本、海量彈性擴展、高度集成、自動優(yōu)化的體驗。針對云端企業(yè)級應用,例如ERP/CRM、數(shù)據(jù)庫、自動駕駛、生命科學、混合云、模擬仿真、氣象分析、EDA、視頻渲染等,亞馬遜云科技提供了Amazon EBS IO2 BX和Amazon FSx系列服務,Amazon EBS IO2 BX是為運行在線下數(shù)據(jù)中心SAN存儲上的應用而設計。
Amazon FSx家族是為了應對Windows、高性能計算、各類企業(yè)應用、大數(shù)據(jù)環(huán)境場景而構建的,X意味著多種文件存儲類型。其中,Amazon FSx for Windows File Server可以完美支持 Windows Server工作負載。2021年11月發(fā)布的全新一代Amazon FSx for Lustre,與當前一代相比,提供5倍的吞吐量(每 TB 高達 1GB/秒),支持與S3的數(shù)據(jù)更新雙向同步,在S3或Lustre任一側更新數(shù)據(jù),都可以在另外一側實現(xiàn)自動快速同步,可以幫助客戶快速完成高性能計算,如基因測序,新藥研發(fā),自動駕駛模擬仿真,半導體設計等任務。全球領先的風電智能化服務商金風慧能采用亞馬遜云科技的HPC集群和Amazon FSx for Lustre高性能共享文件系統(tǒng),在一周內(nèi)完成系統(tǒng)搭建,整個系統(tǒng)讓金風慧能的氣象數(shù)據(jù)計算時間縮短了1/3, 每年節(jié)約了~70%的成本。亞馬遜云科技在2021年11月發(fā)布了Amazon FSx for OpenZFS,面向大數(shù)據(jù)分析Linux工作負載。針對那些以往把數(shù)據(jù)放在ZFS或者其它Linux文件服務器、而不希望改變架構的云遷移客戶。通過它,可以讓ZFS或其他基于Linux的文件服務器遷移到亞馬遜云科技時不需要改變應用和管理數(shù)據(jù)的方式,提供高達1百萬IOPS ,而延遲僅有幾百微秒,非常適合運行像機器學習和音視頻實時處理這類數(shù)據(jù)密集型工作負載。
2021年9月亞馬遜云科技發(fā)布了Amazon FSx for NetApp ONTAP方便企業(yè)業(yè)務無縫遷移上云。使客戶能夠在亞馬遜云科技上啟動、運行和擴展全面托管的NetApp ONTAP文件存儲服務,無需修改其應用、工具、流程或工作流,即可將其在NAS設備上運行的應用遷移至亞馬遜云科技。Amazon FSx for NetApp ONTAP讓客戶可使用其已經(jīng)熟悉的NAS工作流來部署、管理應用和數(shù)據(jù),同時盡享亞馬遜云科技帶來的敏捷性、可擴展性和安全性,以及與亞馬遜云科技其它服務之間的無縫集成。
在Amazon FSx for NetApp ONTAP的助力下, 嘉里物流通過系統(tǒng)自帶的SnapMirror功能,快速把線下數(shù)據(jù)的中心NetApp ONTAP的數(shù)據(jù)遷移到亞馬遜云科技上,在云上,利用Amazon FSx for ONTAP Snapshots 來實現(xiàn)關鍵數(shù)據(jù)的快速備份保護,云上的存儲空間和備份空間都是即開即用,隨時擴容。免除了復雜的管理開銷,方便的實現(xiàn)了業(yè)務數(shù)據(jù)在各個國家不同部門之間的安全快速共享,提升了業(yè)務系統(tǒng)的安全性和可靠性。
用統(tǒng)一數(shù)據(jù)保護和一站式數(shù)據(jù)備份解決數(shù)據(jù)安全與合規(guī)的挑戰(zhàn)
面對企業(yè)數(shù)據(jù)備份的三大挑戰(zhàn):管理復雜、安全合規(guī)挑戰(zhàn)、成本高昂,亞馬遜云科技的解決之道是Amazon Backup--云上的一站式備份服務。
Amazon Backup提供圖形化管理控制臺,提供基于策略的備份解決方案,簡化備份管理;通過集中式的備份監(jiān)控和日志,以及數(shù)據(jù)安全和權限管理服務,確保備份數(shù)據(jù)的安全合規(guī);通過數(shù)據(jù)冷熱分層來降低成本。澳大利亞領先的獨立石油和天然氣生產(chǎn)商Santos采用 Amazon Backup,極大的減輕了IT人員的工作負擔。不僅備份時間減少了80%,降低了相關運營成本50%,最重要的是,備份任務的成功率從 80% 提高到 100%,完全滿足了合規(guī)需求。
十六年來,亞馬遜云科技存儲服務已經(jīng)成為IT行業(yè)的“水”和“電”,讓各行各業(yè)的業(yè)務都能從存儲服務中獲得價值。亞馬遜云科技始終保持Day1的心態(tài),持續(xù)開發(fā)新的功能,為用戶帶來更多的價值。