戴爾易安信ECS對象存儲 | 再掀對象存儲新革命
在金融科技的浪潮下,券商作為整個金融行業(yè)價值鏈的核心環(huán)節(jié),轉(zhuǎn)型與變革已成為大勢所趨。特別是過去幾年隨著券商業(yè)務(wù)領(lǐng)域不斷拓展,非結(jié)構(gòu)化數(shù)據(jù)也迎來了爆發(fā)式增長,這些數(shù)據(jù)在為券商發(fā)展提供強大驅(qū)動力的同時,也給數(shù)據(jù)的長期存儲管理與使用帶來了更大的挑戰(zhàn)。
▐ 以某劵商的互聯(lián)網(wǎng)業(yè)務(wù)為例,通常來說,互聯(lián)網(wǎng)業(yè)務(wù)通常會采取多數(shù)據(jù)中心多活架構(gòu),這樣可以充分保障服務(wù)高可用。諸如開戶錄音、錄像數(shù)據(jù)需要長期保留并拒絕篡改,在數(shù)據(jù)的保留期內(nèi)能快速調(diào)閱備查等特點,這就要求業(yè)務(wù)系統(tǒng)的底層存儲的架構(gòu)要靈活,功能要豐富、訪問便捷和存儲成本低。
為此,在經(jīng)過多方面的考察和測試比較以后,該券商選擇了戴爾易安信ECS對象存儲為基礎(chǔ),搭建了基于標準S3協(xié)議的非結(jié)構(gòu)化數(shù)據(jù)存儲平臺,不僅實現(xiàn)了三地三中心的異步復(fù)制容災(zāi)架構(gòu),用于海量非結(jié)構(gòu)化數(shù)據(jù)增長的長久保存,同時更為未來的多活互聯(lián)網(wǎng)應(yīng)用的數(shù)據(jù)調(diào)用搭建基礎(chǔ)存儲平臺。
事實上,該券商基于戴爾易安信ECS對象存儲技術(shù)實現(xiàn)海量非結(jié)構(gòu)化數(shù)據(jù)的管理實踐,正是行業(yè)客戶高度認可戴爾科技集團在對象存儲領(lǐng)域?qū)嵙Φ闹匾?ldquo;縮影”。
在Gartner近期公布的《2020年分布式文件系統(tǒng)和對象存儲魔力象限》報告中,戴爾科技集團就位列榜首,再一次展現(xiàn)了其強大的技術(shù)實力和領(lǐng)先優(yōu)勢。而自2016年Gartner首次發(fā)布該報告以來,戴爾科技集團已連續(xù)五年實現(xiàn)了“霸榜”。
2020年分布式文件系統(tǒng)和對象存儲魔力象限
值得一提的是,近期戴爾易安信ECS也迎來全新的版本更新,新推出的ECS3.6可為企業(yè)級客戶提供高度靈活的整體解決方案,使用體驗超越公有云服務(wù),能夠輕松捕獲、存儲、保護和管理海量非結(jié)構(gòu)化數(shù)據(jù),并針對云原生應(yīng)用、大數(shù)據(jù)分析、數(shù)據(jù)資產(chǎn)歸檔等場景進行了優(yōu)化。
不僅如此,ECS還增加配備了NVMe SSD的ECS EXF900一體機,能夠為企業(yè)的現(xiàn)代工作負載(例如AI、機器學習、物聯(lián)網(wǎng)和實時分析應(yīng)用程序)大幅提升性能,可以說在對象存儲市場再次掀起一場“新變革”。
毫無疑問,在這背后正是戴爾科技集團一直以來在存儲領(lǐng)域“與時俱進”積極響應(yīng)用戶需求的最新舉措,也是其跟隨時代不斷進化和迭代的具體體現(xiàn),相信這種持續(xù)的前瞻力、創(chuàng)新力和產(chǎn)品力,將為戴爾科技集團在對象存儲市場實現(xiàn)“長跑”乃至“領(lǐng)跑”起到更加至關(guān)重要的作用,也將會為釋放海量數(shù)據(jù)更大潛能發(fā)揮出更為關(guān)鍵的價值。
對象存儲進化與迭代
眾所周知,傳統(tǒng)企業(yè)存儲都有一個共同的特征,即只能垂直擴展,它在管理、成本、容量和性能方面滿足不了海量和非結(jié)構(gòu)化數(shù)據(jù)的存儲需求。為了滿足非結(jié)構(gòu)化數(shù)據(jù)的存儲需求,整個企業(yè)級存儲市場從“垂直擴展”向“橫向擴展”轉(zhuǎn)變,形成了新一代企業(yè)級存儲,包括塊存儲、文件存儲和對象存儲。
其中,對象存儲作為一種新型網(wǎng)絡(luò)存儲架構(gòu),采用了“對象”數(shù)據(jù)組織,其綜合了NAS和SAN的優(yōu)點,同時具有SAN的高速直接訪問和NAS的數(shù)據(jù)共享等優(yōu)勢,提供了高可靠性、跨平臺性以及安全的數(shù)據(jù)共享的存儲體系結(jié)構(gòu)。
▐ 從技術(shù)角度看,最適合存儲非結(jié)構(gòu)化數(shù)據(jù),即圖片、視頻等類型數(shù)據(jù)的是分布式文件存儲和對象存儲。但在大量文件的并發(fā)性能方面,對象存儲比文件存儲要強的多,同時在系統(tǒng)中存入大量文件后的性能穩(wěn)定性方面,對象存儲的表現(xiàn)也比文件存儲要強的多。因此,對象存儲的廣泛采用,也會為企業(yè)未來一步步搭建數(shù)據(jù)湖打下基礎(chǔ)。
▐ 而從應(yīng)用場景看,以5G、大數(shù)據(jù)、人工智能為代表的新興技術(shù)越來越深入行業(yè)應(yīng)用,數(shù)據(jù)在“端、邊、云”延伸,數(shù)據(jù)的種類和數(shù)量越來越多,而對象存儲面對海量數(shù)據(jù)場景具備天然優(yōu)勢,過去幾年被互聯(lián)網(wǎng)和云公司廣泛采用,逐漸也就成為了存儲市場中的“后起之秀”。
對此,戴爾科技集團中國區(qū)非結(jié)構(gòu)化數(shù)據(jù)解決方案部系統(tǒng)工程師白光茁感同身受。
他說:“對象存儲過去一般被應(yīng)用于歸檔的場景,但過去幾年我們能夠明顯的看到,對象存儲正在往在線存儲,甚至是一線存儲的角度去轉(zhuǎn)變,因此它對于客戶應(yīng)用系統(tǒng)支撐的重要性,也是在不斷地往前提升。”
事實上,作為對象存儲領(lǐng)域的資深玩家,戴爾科技集團在對象存儲領(lǐng)域的耕耘歷史超過了20年,旗下的戴爾易安信第一代對象存儲是Centera,Centera主要針對數(shù)據(jù)歸檔和法規(guī)遵從場景進行設(shè)計,并廣泛應(yīng)用于金融行業(yè),是針對特定場景專用存儲設(shè)備。
2008年,戴爾易安信推出第二代對象存儲Atmos,從第二代對象存儲開始,對象存儲設(shè)備以平臺的定位進入到數(shù)據(jù)中心,同時由于跨地域數(shù)據(jù)復(fù)制,跨地域數(shù)據(jù)訪問特性的引入,對象存儲的云特性得以體現(xiàn),因此從第二代對象存儲開始,對象存儲也被稱為云存儲平臺。
時間進入到2014年,戴爾易安信又推出第三代對象存儲ECS,這是全球第一款直接支持Hadoop大數(shù)據(jù)分析平臺的對象存儲產(chǎn)品,同時通過直接提供HDFS接口以及跨HDFS和S3接口的數(shù)據(jù)互聯(lián)互通,使得對象存儲成為整個數(shù)據(jù)中心的數(shù)據(jù)湖平臺,支持海量數(shù)據(jù)的存儲、保護、訪問和分析。
但也要看到,盡管對象存儲作為存儲基礎(chǔ)設(shè)施領(lǐng)域最具發(fā)展前景的全新市場,但隨著數(shù)字化轉(zhuǎn)型的不斷加速,行業(yè)新應(yīng)用爆發(fā)式增長,從數(shù)千、數(shù)萬躍升到百萬量級,數(shù)據(jù)呈現(xiàn)出海量、多元、實時、多云等趨勢,這也對對象存儲提出了全新的挑戰(zhàn)。從這個角度來說,對象存儲本身的技術(shù)發(fā)展也到了一個關(guān)鍵的重構(gòu)期。
再掀對象存儲新革命
基于此,戴爾科技集團旗下的戴爾易安信發(fā)布了全新的ECS3.6版本,并推出基于NVMe的全閃存新款設(shè)備EXF900,為包括AI、機器學習、IoT和實時分析等全新工作負載提供了有力的支持,更為ECS產(chǎn)品線的未來創(chuàng)新奠定堅實的基礎(chǔ),全新的ECS具備以下三個方面領(lǐng)先優(yōu)勢,具體而言:
1. 無限規(guī)模的擴展能力,能夠幫助用戶降低總體擁有成本。
ECS采用橫向擴展、地理分布式體系結(jié)構(gòu),無論客戶的數(shù)據(jù)中心位于何處,都可以輕松跟上指數(shù)級數(shù)據(jù)增長的步伐,更只需以類似于公有云的規(guī)模添加新節(jié)點和支持工作負載,就能同時實現(xiàn)私有云基礎(chǔ)架構(gòu)的可靠性和控制。
更為關(guān)鍵的是,ECS的企業(yè)規(guī)模、性能和多功能性帶來了更大的成本節(jié)約。數(shù)據(jù)顯示,與先進的公有云提供商相比,通過ECS構(gòu)建一個對象存儲云,總擁有成本可降低59.5%。此外,借助ECS,企業(yè)可以解決許多公有云面對的難題,包括數(shù)據(jù)遷移成本、延遲、數(shù)據(jù)訪問模式的不可預(yù)測性、云供應(yīng)商依賴、安全和法規(guī)遵從性等問題。
同時ECS在企業(yè)存儲基礎(chǔ)設(shè)施中,還能夠扮演多種“角色“,包括使用ECS的多站點聯(lián)合功能,企業(yè)可以創(chuàng)建可全局訪問的內(nèi)容存儲庫;同時它還能充當二級存儲,為關(guān)鍵業(yè)務(wù)應(yīng)用釋放昂貴的主存儲資源,同時與傳統(tǒng)的磁帶歸檔相比,ECS還可保持長期數(shù)據(jù)存儲的隨時可用;這樣,企業(yè)就能以較低投入管理數(shù)十億個對象和PB級的數(shù)據(jù)。
2. 用兼容S3的高性能存儲支持現(xiàn)代化工作負載。
全新推出的基于NVMe的全閃存新款設(shè)備EXF900,還率先將S3接口的簡易性與基于NVMe的SSD設(shè)備的超快性能存儲系統(tǒng)相結(jié)合,為包括Spark、TensorFlow、Presto等讀取密集型應(yīng)用程序提供了理想的數(shù)據(jù)存儲平臺。
據(jù)介紹,目前ECS EX系列一體機包括四款獨特的硬件產(chǎn)品,即EX300、EX500、EX3000和全閃存EXF900。
其中,EX300是入門版產(chǎn)品,它以容量60TB起的群集選項降低了采用對象存儲的門檻;EX500實現(xiàn)了經(jīng)濟性與密度的出色結(jié)合,為ECS一體機產(chǎn)品組合注入了更高的靈活性;EX3000則是一種采用可熱插磁盤的高密度對象存儲系統(tǒng),每個機架的最高容量可達到11.5PB,并可輕松擴展到EB規(guī)模;而作為EX系列的最新產(chǎn)品,EXF900通過全閃存的加持,為下一代工作負載提供了理想的選擇,其容量可從每機架230TB開始進行擴展。
不僅如此,利用ECS對S3、NFS、HDFS等的多協(xié)議支持和良好的互操作性,企業(yè)也可以更好的構(gòu)建現(xiàn)代數(shù)據(jù)湖;此外,ECS還將效率、耐用性、性能和可擴展性實現(xiàn)了完美結(jié)合,企業(yè)無論是需要高性能存儲來分析機器數(shù)據(jù),還是需要高效、經(jīng)濟的冷存儲,ECS都可以助一臂之力。同時,ECS也是非常適合流數(shù)據(jù)引擎(例如戴爾易安信流數(shù)據(jù)平臺)的持久數(shù)據(jù)存儲。
3. 經(jīng)過企業(yè)級的驗證,能夠更好的支持企業(yè)的數(shù)字化轉(zhuǎn)型。
戴爾科技集團擁有豐富的對象存儲設(shè)計經(jīng)驗,同時ECS具有非常高的穩(wěn)定性,廣泛應(yīng)用于銀行、證券、保險等金融行業(yè)的重要系統(tǒng),具有成熟的超大規(guī)模的案例。因此,經(jīng)過最佳實踐沉淀和打磨出來的ECS可以幫助客戶更好的采用對象存儲平臺,實現(xiàn)對海量數(shù)據(jù)的高效管理。
在此基礎(chǔ)上,ECS還具備原生保護功能(、擦除代碼、高度一致性、容錯、等),確保所有數(shù)據(jù)中心區(qū)域的數(shù)據(jù)始終安全且可恢復(fù)。同時,ECS也加入了戴爾科技集團推出的“未來無憂存儲保障計劃”,也能夠進一步護航企業(yè)的數(shù)字化轉(zhuǎn)型。
不難看出,全新的ECS作為業(yè)界領(lǐng)先的對象存儲平臺,不僅能同時支持傳統(tǒng)工作負載和下一代工作負載,更能以純軟件模式部署,也可以通過一體機這種“交鑰匙”的方式部署,擁有更好的可擴展性、性能、彈性和經(jīng)濟性,真正滿足了企業(yè)現(xiàn)代化應(yīng)用的需求。更為重要的是,作為與S3兼容的,可全局擴展的對象存儲,ECS也能通過安全可控的私有云基礎(chǔ)架構(gòu)來實現(xiàn)公共云的功能。
此外,使用ECS還能夠以更低的總體擁有成本開發(fā)現(xiàn)代化的應(yīng)用程序,構(gòu)建EB規(guī)模的歸檔系統(tǒng),可以說真正在對象存儲市場掀起了一場“煥新”變革。
釋放海量數(shù)據(jù)新價值
客觀的說,數(shù)據(jù)長久以來都作為企業(yè)的資產(chǎn)被保存,但由于缺乏有效的數(shù)據(jù)處理機制,這些大量的數(shù)據(jù),分散于各處,難以聯(lián)通,難以匯聚,發(fā)揮不出更好的價值,而隨著對象存儲被廣泛的應(yīng)用,目前越來越多的行業(yè)和客戶也開始通過對象存儲實現(xiàn)了數(shù)據(jù)價值的釋放。
正如文章開篇所提到的,隨著銀行、券商等金融行業(yè)的數(shù)字化業(yè)務(wù)的持續(xù)開展、監(jiān)管機構(gòu)的監(jiān)管要求不斷的增加,各應(yīng)用系統(tǒng)產(chǎn)生的各種影像、音頻、視頻、文檔文件等非結(jié)構(gòu)化數(shù)據(jù)呈現(xiàn)“爆炸性”增長的態(tài)勢,傳統(tǒng)金融企業(yè)在面對千萬、億級數(shù)量,PB級容量的海量非結(jié)構(gòu)化數(shù)據(jù)的存儲和管理時已經(jīng)日益凸顯出性能瓶頸。
以銀行的“影像平臺”(也稱影像處理平臺、影像管理平臺)為例,它構(gòu)建了銀行非結(jié)構(gòu)化數(shù)據(jù)的管理平臺,具有綜合存儲管理銀行海量非結(jié)構(gòu)化數(shù)據(jù)的能力,完成從內(nèi)容采集、創(chuàng)建、傳遞到內(nèi)容分析等內(nèi)容整個生命周期的完全整合。但當前的影像系統(tǒng)采用文件系統(tǒng)作為存儲方式,而文件系統(tǒng)目錄式的管理方式,在擴展性、多站點訪問和管理的便利性、以及多站點的可靠性存在諸多不便。
而采用ECS對象存儲提供的超大規(guī)模的存儲架構(gòu),就能解決傳統(tǒng)文件系統(tǒng)存儲所面臨的種種問題,可以更好保障銀行內(nèi)非結(jié)構(gòu)化影像數(shù)據(jù)的安全,從而更好的為業(yè)務(wù)部門提供保障。
在白光茁看來,過去幾年,銀行影像平臺越來越多的采用了對象存儲,而現(xiàn)在很多醫(yī)院、或者媒體行業(yè)的歸檔或者備份的場景也都在采用對象存儲平臺,可以說對象存儲在很多行業(yè)領(lǐng)域都在起到更加關(guān)鍵的作用。
因此,他也建議未來企業(yè)在存儲基礎(chǔ)設(shè)施選型時,一定要盡快引入對象存儲的技術(shù),而戴爾科技集團一方面會加大對象存儲技術(shù)的持續(xù)創(chuàng)新,同時會通過國內(nèi)的ECS研發(fā)團隊為客戶提供更多的支持;另一方面,戴爾科集團也會積極拓展國內(nèi)市場的對象存儲新生態(tài),以更好的推動企業(yè)采用對象存儲平臺。
總的來說,過去多年對存儲技術(shù)創(chuàng)新的專注,是戴爾科技集團領(lǐng)跑對象存儲市場的底氣和底蘊,而通過技術(shù)創(chuàng)新的迭代和升級,進一步推動對象存儲的落地,則凸顯了戴爾科技集團賦能企業(yè)加速數(shù)字化轉(zhuǎn)型,釋放海量數(shù)據(jù)新價值的決心和信心,相信隨著ECS更大規(guī)模的采用,戴爾科技集團將會引領(lǐng)整個對象存儲市場未來發(fā)展的新方向和新趨勢,并在中國未來“新基建”的建設(shè)過程中發(fā)揮更加重要的作用和價值。
尊敬的讀者
隨著今天的企業(yè)越來越需要從
非結(jié)構(gòu)化數(shù)據(jù)中發(fā)掘和提取價值
讓數(shù)據(jù)資產(chǎn)“變現(xiàn)”
對象存儲自身所蘊含的諸多優(yōu)勢
也越來越受企業(yè)用戶的青睞
對此,本周三(2月3日)
10:00-11:00
戴爾科技將舉辦
《ECS解鎖非結(jié)構(gòu)化數(shù)據(jù)增長的價值》
在線研討會
就對象存儲市場最新發(fā)展趨勢
以及ECS如何支持
企業(yè)傳統(tǒng)與下一代工作負載
等話題進行分享和介紹
歡迎掃描下圖二維碼
或點擊文末
掃碼參會
相關(guān)內(nèi)容推薦:戴爾易安信高端存儲 PowerMax |戴爾科技和英特爾助您搭建強大 SAP HANA 平臺