作為Intel的重要戰(zhàn)略合作伙伴,在Intel推出基于Purley平臺的新一代有著更強計算性能以及更好用戶體驗支持的至強®可擴展處理器后,浪潮同步推出基于Intel Purley平臺的新一代服務(wù)器NF5280M5。為了證實雙方產(chǎn)品的互操作性以及方案的先進(jìn)性,浪潮和Intel共同開發(fā)了浪潮NF5280M5基于BigDL的英特爾® 精選解決方案。
英特爾® 精選解決方案是一系列經(jīng)過驗證的硬件與軟件堆棧,針對特定的軟件工作負(fù)載進(jìn)行了計算、存儲和網(wǎng)絡(luò)方面的優(yōu)化將工作負(fù)載優(yōu)化提升至全新高度,可以充分利用英特爾®至強®可擴展處理器平臺的新一代技術(shù)性能優(yōu)勢。這些解決方案的開發(fā)源于英特爾與包括浪潮在內(nèi)的行業(yè)解決方案提供商的深入合作,以及與全球先進(jìn)數(shù)據(jù)中心和服務(wù)提供商的廣泛協(xié)作。
作為Intel的重要戰(zhàn)略合作伙伴,在Intel推出基于Purley平臺的新一代有著更強計算性能以及更好用戶體驗支持的至強®可擴展處理器后,浪潮同步推出基于Intel Purley平臺的新一代服務(wù)器NF5280M5。為了證實雙方產(chǎn)品的互操作性以及方案的先進(jìn)性,浪潮和Intel共同開發(fā)了浪潮NF5280M5基于BigDL的英特爾® 精選解決方案。
BigDL是由Intel開源的一款面向Spark的分布式深度學(xué)習(xí)庫,在現(xiàn)有的 Spark、Hadoop集群上直接運行。將深度學(xué)習(xí)應(yīng)用編寫為 Scala 或 Python 程序。
浪潮NF5280M5 服務(wù)器是浪潮為公司針對互聯(lián)網(wǎng)、IDC(Internet Data Center)、云計算、企業(yè)市場以及電信業(yè)務(wù)應(yīng)用等需求,基于全新一代Intel® 至強® 可擴展處理器設(shè)計的一款 2U 2 路機架服務(wù)器。該產(chǎn)品滿足更多業(yè)務(wù)對高網(wǎng)絡(luò)帶寬、高計算性能、大內(nèi)存容量的要求,同時對密度和計算性能有較高并對存儲有一定要求的客戶提供了很好的解決方案。
浪潮NF5280M5 基于BigDL的英特爾® 精選解決方案中,選擇浪潮基于Intel® 至強® 可擴展處理器的新一代服務(wù)器NF5280M5,性能較優(yōu),同時提供一個穩(wěn)定高效的硬件基礎(chǔ)。
Inspur BigDL方案:
Inspur BigDL網(wǎng)絡(luò)拓?fù)洌?/p>
Inspur BigDL配置:
BigDL測試結(jié)果:
inception V1模型訓(xùn)練過程中平均吞吐量(448.9 images/sec)和Top5準(zhǔn)確度(87.6%),兩項性能指標(biāo)均超過英特爾® 精選解決方案的認(rèn)證指標(biāo)375 images/sec、85%,通過了認(rèn)證。
安裝配置手冊下載:
具有豐富的深度學(xué)習(xí)支持:BigDL模仿Torch,為深度學(xué)習(xí)提供綜合支持,包括數(shù)值計算(借助Tensor)和高級神經(jīng)網(wǎng)絡(luò);此外,用戶可以將預(yù)訓(xùn)練Caffe或Torch模型加載至Spark框架,并使用 BigDL庫在數(shù)據(jù)中運行推斷應(yīng)用。
具有高效的橫向擴展:利用Spark,BigDL能夠在 Spark 中高效地橫向擴展,處理大數(shù)據(jù)規(guī)模的數(shù)據(jù)分析,高效實施隨機梯度下降 (SGD),以及進(jìn)行 all-reduce 通信。
具有極高的性能:為了實現(xiàn)較高的性能,BigDL在每個Spark任務(wù)中采用英特爾數(shù)學(xué)核心函數(shù)庫(MKL)和多線程編程。因此,相比現(xiàn)成的開源 Caffe、Torch 或 TensorFlow,BigDL在單節(jié)點英特爾至強處理器上的運行速度高出多個數(shù)量級(與主流圖形處理單元相當(dāng))。