適用於 Apache Spark 上 BigDL 的 Intel® Select 解決方案

加速並簡化深度學習在經驗證之最佳化基礎架構上的開發與部署作業。
閱讀解決方案簡介 ›

適用於 Apache Spark 上 BigDL 的 Intel Select 解決方案的基本組態。

元素

適用於 Apache Spark 上 BigDL 的 Intel Select 解決方案
基本組態

至少一個主要節點

處理器

Intel® Xeon® Gold 6148 處理器(2.40 GHz,20 核心,40 執行緒)、Intel® Xeon® Gold 6248 處理器(2.5 GHz,20 核心),或等級更高的 Intel® Xeon® 可擴充處理器

記憶體

192 GB 或以上 (12 x 16 GB DDR4-2666)

開機磁碟機**

1 x 240 GB 或更大的 Intel® SSD DC S4500/S4510(M.2 或 2.5 吋)或更高等級

每一節點的儲存 HBA 控制器**

不適用 (N/A)

資料層

4 x 960 GB 或更大的 Intel SSD DC S4500/S4510 或更高等級

數據網路

10 Gb Intel® 乙太網路交集網路介面卡 X722 (Intel® Ethernet CNA X722)

每一節點的管理網路

整合式 1 GbE 連接埠 0/RMM 連接埠

至少四個工作節點

處理器

Intel Xeon Gold 6148 處理器(2.40 GHz,20 核心,40 執行緒)、Intel Xeon Gold 6248 處理器(2.5 GHz,20 核心),或等級更高的 Intel Xeon 可擴充處理器

記憶體

384 GB 或以上 (12 x 32 GB DDR4-2666)

開機磁碟機**

1 x 240 GB 或更大的 Intel SSD DC S4500/S4510(M.2 或 2.5 吋)或更高等級

每一節點的儲存 HBA 控制器**

資料層

4 x 3.8 TB 或更大的 Intel SSD DC S4500/S4510 或更高等級

數據網路

10 Gb Intel 乙太網路聚合式網路介面卡 X722 (Intel 乙太網路 CNA X722)

每一節點的管理網路

整合式 1 GbE 連接埠 0/RMM 連接埠

網路交換器

機架頂端 (ToR) 式交換器

10 Gbps 48x 埠交換器

管理交換器

1 Gbps 48x 埠交換器

軟體

Linux 作業系統

CentOS Linux 版本 7.5.1804,或 Red Hat Enterprise Linux* (RHEL*) 7

Apache Spark

2.2.0

Apache Hadoop

2.7.3

Java Development Kit (JDK)

Oracle JDK 1.8.0 更新 181 或後續版本

BigDL

0.6

Analytics Zoo

0.2

Intel® Distribution for Python*

2.7

Intel® 數學核心程式庫 (Intel® MKL)

Intel MKL 版本 2018 更新 3

適用於所有節點

信賴平台模組 (TPM)

TPM 1.2 分離式或韌體 TPM (Intel® Platform Trust Technology [Intel® PTT])

韌體和軟體最佳化

啟用 Intel® Volume Management Device (Intel® VMD)**

啟用 Intel® Boot Guard**

停用 Intel® 超執行緒技術

啟用 Intel® 渦輪加速技術

啟用 P-states**

啟用 C-states**

電源管理設定設為效能**

工作負載組態設為平衡**

啟用 Memory Latency Checker (MLC) 內容串流者**

啟用 MLC 空間預取**

啟用 Data Cache Unit (DCU) 資料預取**

啟用 DCU 指令預取**

停用末級快取記憶體 (LLC) 預取**

啟用 Uncore Frequency Scaling**

最低效能標準

通過驗證符合或超過下列最低效能:

ImageNet Training Throughput

每秒 375 個影像,具備 85% 或更高的 Top-5 準確度1
**建議但不規定使用

產品與效能資訊

1

效能結果依據截至 2018 年 10 月 10 日的測試,可能無法反映所有公開提供的安全性更新。請查看組態公開資料以獲得詳細資訊。沒有產品能提供絕對的安全性。組態:一個主要節點:2 x Intel® Xeon® Gold 6148 處理器,Intel® 伺服器主機板 S2600WFT,總記憶體:192 GB,12 插槽/16 GB/2,666 每秒百萬次 (MT/s) DDR4 RDIMM,停用 Intel® 超執行緒技術,啟用 Intel® 渦輪加速技術;儲存裝置(開機):1 x 240 GB Intel® SSD DC S4500;儲存裝置:4 x 960 GB Intel® SSD DC S4500;網路裝置:1 x 10 Gb Intel® 乙太網路介面卡 X722,網路速度:10 GbE,ucode:0x043,作業系統/軟體:CentOS* Linux 版本 7.5.1804;四個工作節點:2 x Intel® Xeon® Gold 6148 處理器,Intel® 伺服器主機板 S2600WFT,總記憶體:384 GB,12 插槽/32 GB/2,666 每秒百萬次 (MT/s) DDR4 RDIMM,停用 Intel® 超執行緒技術,啟用 Intel® 渦輪加速技術;儲存裝置(開機):1 x 240 GB Intel® SSD DC S4500;儲存裝置:4 x 3.8 TB Intel® SSD DC S4500;網路裝置 1 x 10 Gb Intel® 乙太網路介面卡 X722,網路速度:10 GbE,ucode:0x043,作業系統/軟體:CentOS* Linux 版本 7.5.1804。