一夜暴富很難實(shí)現(xiàn)，還是多拉幾個(gè)單子比較實(shí)在
前段時(shí)間
2019年胡潤(rùn)百富榜發(fā)布
我一如既往地沒有上榜
對(duì)著名單酸了幾分鐘
就默默滾去搬磚
一夜暴富可能很難實(shí)現(xiàn)了
還是多拉幾個(gè)單子比較實(shí)在
這兩天刷朋友圈，我發(fā)現(xiàn)以前合作過的客戶張總監(jiān)不太開心，似乎工作上遇到了什么困難，我先跟他聊聊，沒準(zhǔn)能拿下一單。
“張總，最近過得咋樣？這兩年高性能計(jì)算大火，您這位算法大咖的身價(jià)都漲幾倍了吧？”
我：“張總，別著急，可能是基礎(chǔ)架構(gòu)出了問題，待我們?cè)敿?xì)了解下您的架構(gòu)分析系統(tǒng)使用現(xiàn)狀，再看看有什么解決辦法。”
近年來，隨著高性能計(jì)算（HPC）成為主流，越來越多的研究人員和工程師能夠以十分快的速度實(shí)現(xiàn)創(chuàng)新，傳感器、衛(wèi)星、高性能計(jì)算機(jī)模擬、高吞吐量設(shè)備和醫(yī)學(xué)成像等產(chǎn)生的大量信息，正在將數(shù)據(jù)存儲(chǔ)庫(kù)推向不可思議的量級(jí)，同時(shí)，圍繞性能和容量的數(shù)據(jù)要求也在迅速增加。
由于存儲(chǔ)輸入/輸出（I/O）功能通常落后于數(shù)據(jù)處理能力，因此存儲(chǔ)組件可能成為HPC的主要瓶頸。另外，管理和監(jiān)控這些復(fù)雜的存儲(chǔ)系統(tǒng)也會(huì)增加存儲(chǔ)管理員和研究人員的負(fù)擔(dān)。
理想情況下，HPC存儲(chǔ)系統(tǒng)應(yīng)具備大容量、高度可擴(kuò)展、高速的性能，且不會(huì)對(duì)內(nèi)部IT專業(yè)知識(shí)或數(shù)據(jù)中心預(yù)算造成壓力。但是，提升支持HPC存儲(chǔ)系統(tǒng)的吞吐量和可擴(kuò)展性可能需要大量的規(guī)劃和配置，此外，與多家供應(yīng)商合作以獲取、部署和支持HPC存儲(chǔ)系統(tǒng)既困難又耗時(shí)。
而戴爾易安信提供的適用于HPC的存儲(chǔ)就緒解決方案，不僅能根據(jù)用戶特定需求靈活定制，而且經(jīng)過預(yù)配置、測(cè)試和驗(yàn)證，可讓用戶以更低的風(fēng)險(xiǎn)在更短的時(shí)間內(nèi)輕松部署大容量存儲(chǔ)系統(tǒng)，同時(shí)為更高價(jià)值的活動(dòng)保留資源和預(yù)算。
此外，隨著計(jì)算需求增長(zhǎng)，用戶還可以輕松快速地?cái)U(kuò)展存儲(chǔ)容量。另有隨附的戴爾易安信Pro-Support服務(wù)，可通過單一支持源幫助用戶預(yù)防和解決潛在的軟硬件問題。
1
適用于HPC NFS存儲(chǔ)的
Dell EMC Ready解決方案
基于NFS協(xié)議的存儲(chǔ)解決方案廣泛適用于HPC集群，因?yàn)镹FS簡(jiǎn)單且經(jīng)過時(shí)間考驗(yàn)，幾乎是每個(gè)Linux發(fā)行版中的標(biāo)準(zhǔn)軟件包。
對(duì)于I/O需求較低的應(yīng)用程序集群，NFS存儲(chǔ)可靠、易于管理且在某些邊界內(nèi)具有出色性能；而在更高I/O要求的群集中，NFS是用于主目錄、應(yīng)用程序存儲(chǔ)，以及輔助存儲(chǔ)庫(kù)（用于應(yīng)用程序數(shù)據(jù)長(zhǎng)期存儲(chǔ)）的良好選擇。
|
適用于HPC NFS存儲(chǔ)的Dell EMC Ready解決方案 |
|
|
Server |
2x PowerEdge R740 Servers |
|
Processor |
Dual Intel® Xeon® Gold 6136, 3 0GHz, 12 cores per processor |
|
Network connectivity |
Choice of: |
|
•Dell EMC H‑Series based on the Intel Omni‑Path Architecture |
|
|
•Mellanox® InfiniBand® EDR |
|
|
Memory |
12x 16GiB 2666 MT/s RDIMM per server |
|
Local disks and RAID controller |
PowerEdge RAID (PERC) H730P with 5x 300GB 15K SAS |
|
hard drives |
|
|
External storage controller |
2x12Gbps SAS HBAs per server |
|
Storage system |
1x PowerVault ME4084 |
|
840TB of raw storage capacity 84x 10TB 7..2K NL SAS hard disk drives |
|
|
Systems management |
Integrated Dell Remote Access Controller 9 (iDRAC9) Enterprise |
|
OpenManage Server Administrator |
|
|
Operating system |
Red Hat® Enterprise Linux (RHEL 7 5) x86_64 |
|
Cluster suite |
Red Hat Cluster Suite from RHEL 7 5 |
|
File system |
Red Hat Scalable File System (XFS) v4 5 0‑15 |
適用于HPC NFS存儲(chǔ)的Dell EMC Ready解決方案示意圖
解決方案優(yōu)勢(shì)：
01
低成本
戴爾易安信服務(wù)器、存儲(chǔ)和網(wǎng)絡(luò)采用成本優(yōu)化的行業(yè)標(biāo)準(zhǔn)，降低了存儲(chǔ)和處理大型HPC數(shù)據(jù)集的成本；
該解決方案經(jīng)過戴爾易安信的預(yù)配置、調(diào)優(yōu)和測(cè)試，可縮短用戶的安裝時(shí)間，降低了規(guī)劃和部署HPC存儲(chǔ)的成本；
此外，幾乎所有Linux®發(fā)行版都提供經(jīng)濟(jì)高效的網(wǎng)絡(luò)文件系統(tǒng)（NFS）存儲(chǔ)，它易于配置，部署和維護(hù)，可降低運(yùn)營(yíng)成本。
02
高性能
針對(duì)HPC NFS存儲(chǔ)的Dell EMC Ready解決方案對(duì)吞吐量性能進(jìn)行了調(diào)整，可隨機(jī)寫入性能高達(dá)6.5KIOPS，隨機(jī)讀取性能高達(dá)18.7KIOPS。
03
可擴(kuò)展
通過在受支持的單個(gè)命名空間中輕松擴(kuò)展多達(dá)64個(gè)節(jié)點(diǎn)和480TB原始容量的能力，可以更輕松地滿足未來需求，從而以更快的吞吐量運(yùn)行更大、更復(fù)雜的應(yīng)用程序。
2
適用于HPC Lustre存儲(chǔ)的
Dell EMC Ready解決方案
今天的HPC工作負(fù)載需要擴(kuò)展的存儲(chǔ)基礎(chǔ)架構(gòu)，并提供極其高效的I/O級(jí)別。因此，Lustre解決方案部署起來既復(fù)雜又耗時(shí)。
而適用于HPC Lustre存儲(chǔ)的Dell EMCReady解決方案，允許用戶在不損失性能或容量的情況下高效擴(kuò)展以適應(yīng)工作負(fù)載需求，不僅符合成本優(yōu)化的行業(yè)標(biāo)準(zhǔn)，而且簡(jiǎn)化了安裝、配置和管理的流程。
|
適用于HPC Lustre存儲(chǔ)的Dell EMC Ready解決方案 |
|
|
Servers |
Management server (IML): 1x PowerEdge R640 Server Lustre Metadata servers (MDS): 2x PowerEdge |
|
Processor |
IML: 2x Intel Xeon Gold 5118 @ 2 3GHz, 12 cores per processor |
|
Network connectivity |
Choice of: |
|
Memory |
IML: 12x 8GiB 2666 MT/s RDIMMs per server |
|
Local disks and RAID controller |
IML: PERC H740P Integrated RAID, 8GB NV cache, |
|
Software |
Lustre Community Edition v2 10 4 Whamcloud |
|
Systems management |
iDRAC9 Enterprise |
|
Operating system |
CentOS™ 7 5 x86_64 RHEL 7 5 x86_64 |
|
OST storage array |
4x PowerVault ME4084 with 336x 3 5" 8TB 7 2K RPM NL SAS |
|
MDT storage array |
1x PowerVault ME4024 with 24 ‑ 960GB SAS SSDs |
|
External storage controllers |
OST: 4x SAS 12Gbps Dell HBA MDS: 2x SAS 12Gbps Dell HBA |
適用于HPC Lustre存儲(chǔ)的Dell EMC Ready解決方案示意圖
解決方案優(yōu)勢(shì)：
01
高性能
適用于HPC Lustre Storage的戴爾易安信解決方案，能夠以超過1PB的持續(xù)容量更快地運(yùn)行更大、更復(fù)雜的應(yīng)用程序?？蛻暨€可以選擇Mellanox InfiniBand EDR或Intel Omni-Path，用于高速、低延遲存儲(chǔ)事務(wù)。
Mellanox InfiniBand EDR：峰值寫入性能為15GB/s；對(duì)于順序操作，峰值讀取性能為18.5GB/s。峰值隨機(jī)寫入性能為17.5K IOPS，在256個(gè)線程上達(dá)到45K IOPS，用于隨機(jī)讀取。
02
可大規(guī)模擴(kuò)展
適用于HPC Lustre Storage的戴爾易安信解決方案為每個(gè)對(duì)象存儲(chǔ)服務(wù)器（OSS）提供960TB的原始存儲(chǔ)，可高效擴(kuò)展來適應(yīng)工作負(fù)載要求，而且不會(huì)降低性能。
用戶可以從小規(guī)模起步，擴(kuò)展到數(shù)萬甚至更多容量，擴(kuò)展將同時(shí)增加總網(wǎng)絡(luò)吞吐量和存儲(chǔ)容量——這允許增加可用存儲(chǔ)量，同時(shí)保持一致的大網(wǎng)絡(luò)吞吐量。
03
高性價(jià)比
簡(jiǎn)化的擴(kuò)展解決方案，使用戶在一定預(yù)算內(nèi)獲得更高的系統(tǒng)性能，并保護(hù)IT投資。戴爾易安信已經(jīng)創(chuàng)建了經(jīng)過測(cè)試與驗(yàn)證的解決方案，使用戶可以專注于業(yè)務(wù)或研究目標(biāo)，從而獲得出色的投資回報(bào)。
跟張總監(jiān)聊完以后，我第二天便來到了他們公司。搜集現(xiàn)狀后發(fā)現(xiàn)服務(wù)器品牌繁多，各品牌跨CPU代數(shù)現(xiàn)狀較為普遍，而且大量數(shù)據(jù)都放在大容量磁盤服務(wù)器上，并沒有統(tǒng)一的存儲(chǔ)，一發(fā)生掉盤，就要花費(fèi)大量時(shí)間用于數(shù)據(jù)重組，嚴(yán)重影響性能，導(dǎo)致業(yè)務(wù)部門經(jīng)常抱怨。
經(jīng)過分析，我給張總監(jiān)推薦了適用于HPC Lustre存儲(chǔ)的Dell EMC Ready解決方案，用于改造基礎(chǔ)架構(gòu)，以大限度地保護(hù)該公司現(xiàn)有投資。
一 個(gè) 月 后
“小鄭啊，真的太感謝你了。用了你們戴爾易安信的解決方案以后，項(xiàng)目進(jìn)展得非常順利，也證明我的算法是沒有問題的。哈哈，這下我可在公司揚(yáng)眉吐氣了！”張總監(jiān)電話里掩不住的興奮。
“張總，別客氣，像您這種大咖真的不應(yīng)該浪費(fèi)時(shí)間在基礎(chǔ)架構(gòu)上，以后這種活都交給我們！”
獎(jiǎng)- 中獎(jiǎng)名單 -自22日文章《這些戴爾人說了夢(mèng)想后，我淚目了...》發(fā)出后，我們?cè)诤笈_(tái)收到很多讀者寫下的美好的夢(mèng)想，感謝大家的參與，祝你們夢(mèng)想成真。同時(shí)，我們從中抽取了10位“夢(mèng)想家”，恭喜你們！
@Ivan Ng
@幸福時(shí)光
@王濤
@安妮
@無序
@李瀟SaraLi
@小九
@楊鵬
@銘偉Emma
@susan（張淑靜）
*請(qǐng)以上中獎(jiǎng)的同學(xué)把您的姓名、手機(jī)號(hào)和收貨地址，以私信的方式發(fā)給我們，我們將為您安排禮品寄送~
相關(guān)閱讀推薦：深入數(shù)據(jù)海洋，“鸚鵡螺號(hào)”起航
了解更多數(shù)字化轉(zhuǎn)型方案查看此鏈接：
https://www.dellemc-solution.com/home/index.html
