舍棄舊模型 獲取新價(jià)值 | 中石化EDW on HANA項(xiàng)目
中石化BP0(核心EDW)承載著集團(tuán)油田、煉油、化工、銷(xiāo)售4個(gè)板塊,87家企業(yè)的財(cái)務(wù)報(bào)表系統(tǒng)。由于中石化集團(tuán)業(yè)務(wù)飛速增長(zhǎng),數(shù)據(jù)量和處理進(jìn)程急劇膨脹,迫切需要大規(guī)模提升并發(fā)訪問(wèn)能力。EDW系統(tǒng)嚴(yán)重的數(shù)據(jù)庫(kù)I/O瓶頸成為業(yè)務(wù)部門(mén)首要解決的問(wèn)題。
華為認(rèn)為,如欲提升處理鏈計(jì)劃的并行能力,勢(shì)必要消除數(shù)據(jù)庫(kù)物理I/O讀寫(xiě)瓶頸,提升數(shù)據(jù)轉(zhuǎn)換和DS0激活性能。應(yīng)當(dāng)從根本上簡(jiǎn)化EDW模型設(shè)計(jì),變分散模型為集中模型,并在系統(tǒng)架構(gòu)上引入新的技術(shù),提升數(shù)據(jù)處理性能,使運(yùn)維安全可靠便捷,這樣才能***限度地滿足業(yè)務(wù)要求。
面對(duì)挑戰(zhàn),中石化權(quán)衡舍與得,果斷實(shí)施EDW on HANA系統(tǒng)遷移計(jì)劃,采用了華為HANA一體機(jī)方案。
其一由8+1的集群系統(tǒng)和單節(jié)點(diǎn)2T規(guī)模構(gòu)成生產(chǎn)環(huán)境,其二由3+1的集群系統(tǒng)和單節(jié)點(diǎn)1T規(guī)模構(gòu)成開(kāi)發(fā)測(cè)試環(huán)境,以提升系統(tǒng)性能,既滿足業(yè)務(wù)部門(mén)快速?zèng)Q策獲取信息要求,又逐步構(gòu)建模型集中的大數(shù)據(jù)分析技術(shù)平臺(tái)。該方案包括HANA數(shù)據(jù)庫(kù)內(nèi)存計(jì)算的計(jì)算集群,HANA數(shù)據(jù)庫(kù)日志卷和數(shù)據(jù)卷持久化保存的存儲(chǔ)集群,提供共享卷存儲(chǔ)空間的共享存儲(chǔ),以及承載日志卷和數(shù)據(jù)卷的數(shù)據(jù)讀寫(xiě)的56Gbps Infiniband網(wǎng)絡(luò)和承載HANA節(jié)點(diǎn)之間通信、共享卷的讀寫(xiě)、所有節(jié)點(diǎn)的管理信息的10GE網(wǎng)絡(luò)。如圖1所示:
圖1 整體解決方案系統(tǒng)邏輯架構(gòu)圖
華為***的分布式存儲(chǔ)引擎使數(shù)據(jù)持久化時(shí)延低至150µs,低于業(yè)界平均時(shí)延50%-75%,可支持1000并行任務(wù),提升存儲(chǔ)網(wǎng)絡(luò)帶寬約7倍,提升HANA數(shù)據(jù)庫(kù)加載性能約60%,并且可以做到按需擴(kuò)容簡(jiǎn)單擴(kuò)容,保證了只需加入相應(yīng)的計(jì)算/存儲(chǔ)刀片即可實(shí)現(xiàn)平滑擴(kuò)容,避免了影響業(yè)務(wù)連續(xù)正常運(yùn)行的風(fēng)險(xiǎn)。服務(wù)器、存儲(chǔ)和網(wǎng)絡(luò)設(shè)備集中監(jiān)控和統(tǒng)一管理,降低企業(yè)OPEX 30%以上。
華為HANA一體機(jī)采用全冗余設(shè)計(jì),整體系統(tǒng)無(wú)單點(diǎn)故障;計(jì)算存儲(chǔ)分離架構(gòu)隔離計(jì)算存儲(chǔ)故障;分布式存儲(chǔ)恢復(fù)1T數(shù)據(jù)的時(shí)間小于30分鐘;華為HANA一體機(jī)基于融合基礎(chǔ)設(shè)施,支持預(yù)集成、預(yù)安裝,機(jī)架密度是其他主流廠商2倍以上,減少機(jī)架占用空間50%~75%,功耗更低。此外,華為與SAP成立聯(lián)合運(yùn)維實(shí)驗(yàn)室,為中國(guó)石化定制本地化7*24*4H專業(yè)運(yùn)維服務(wù),提供量身定制的關(guān)鍵事件保障及***級(jí)別的職守。
目前,中石化EDW on HANA遷移項(xiàng)目已正式交付使用。日常業(yè)務(wù)處理能力平均提升2~4倍,月結(jié)業(yè)務(wù)處理平均提升3~5倍,BP0 PSA至輸出層的處理鏈提升4~6倍。BP0系統(tǒng)資源充足,負(fù)載高峰期運(yùn)行穩(wěn)定,處理鏈運(yùn)行平穩(wěn)高效,系統(tǒng)綜合性能提升顯著,用戶反應(yīng)強(qiáng)烈的清洗、加載速度慢問(wèn)題得到徹底解決。
ERP大集中是集團(tuán)公司進(jìn)一步規(guī)范、優(yōu)化業(yè)務(wù)流程、增強(qiáng)風(fēng)險(xiǎn)防控能力、支撐共享服務(wù)等的管理創(chuàng)新,是提高集團(tuán)公司業(yè)務(wù)整體運(yùn)行效率的一項(xiàng)重要工作。中石化EDW on HANA遷移項(xiàng)目是ERP大集中的的一個(gè)重要環(huán)節(jié)。目前,大集中工作已經(jīng)基本完成。數(shù)字資源的集中形成最可靠、最安全的數(shù)據(jù)存儲(chǔ)中心,為石化云計(jì)算應(yīng)用和數(shù)據(jù)挖掘提供了必要條件,構(gòu)建了數(shù)據(jù)的天然云化資源池。這些流動(dòng)的數(shù)據(jù)將通過(guò)集中煥發(fā)出新的生命,對(duì)流程優(yōu)化再造、業(yè)務(wù)可視化運(yùn)營(yíng)打下了良好的基礎(chǔ),助力石化集團(tuán)進(jìn)一步提升智能制造專業(yè)水平。
全文結(jié)束--