环境介绍

物理环境采用管理节点*1+数据节点*3的部署方案，在网络层面，管理与业务分离部署，管理网络使用GE电口来进行网络间的通信，业务网络使用10GE光口来进行网络间的通信，组网如图1所示。

图1 物理环境组网

硬件要求如表1所示。

表1 硬件要求
项目	说明
机型	TaiShan服务器
处理器	鲲鹏920 5220处理器
内存大小	384GB (12 * 32GB)
内存频率	2666MHz
网络	业务网络10GE，管理网络1GE
硬盘	系统盘：1RAID 0（11.2TB SAS HDD）数据盘：12RAID 0（14TB SATA HDD）
RAID卡	LSI SAS3508

操作系统和软件要求如表2所示。

机器学习算法加速库适配Spark 2.3.2、2.4.5、2.4.6版本，与原生算法库提供相同的接口。
机器学习算法库适配Spark 3.1.1，仅支持ALS、LDA、KNN、PrefixSpan、DBSCAN、Word2Vec、Decision Tree、DTB、Random Forest 、GBDT这10个算法。
Spark 2.4.5与Spark 2.4.6使用Spark 2.4.6的JAR包。
其他2.X、3.X版本技术上兼容，根据需求适配。

父主题： 调优概述