安装DPAK SDK
基于SP680智能网卡(Smart NIC)构建DPAK应用,SP680智能网卡适用于虚拟化、协议解析场景,以下提供SP680配套的虚拟化和OVS软件的自动化部署操作,自动部署脚本仅供参考。
OVS卸载自动化部署
- 环境准备
- 支持单节点部署,物理机要安装SP680智能网卡,需要在BIOS中开启IOMMU(Input/Output Memory Management Unit)、配置内存大页并安装智能网卡驱动。
- 节点需要关闭SELinux和防火墙,并能正常访问外部网络。
- 仅支持运行在物理机上的openEuler 20.03 LTS SP1操作系统。
- 安装过程
- 安装网卡驱动,安装前请先获取相关驱动包和“Hinic3_flash.bin”文件,放到“ovs_build/driver”目录中。
1 2
cd ovs_studio bash install_driver.sh
驱动安装完成后重启服务器。
- 使能virtio-net设备。
1 2
cd ovs_studio bash virtio_enable.sh
重启服务器后,virtio-net设备处于未使能状态,需要对其进行使能,可以执行上面命令使能virtio-net设备。如果需要开机自动执行此脚本,可以进行如下操作。
- 为脚本添加一个服务,参考virtio-enable.service文件内容如下。
1 2 3 4 5 6 7 8 9
[Unit] Description=DPAK virtio enable script [Service] Type=simple ExecStart=sh <path>/virtio_enable.sh [Install] WantedBy=multi-user.target
其中<path>替换为脚本所在的绝对路径。
- 将virtio-enable.service文件放入“/usr/lib/systemd/system”目录,设置开机自启动。
1
systemctl enable virtio-enable
- 部署ovs,安装前请先获取DPU-solution-dpak-runtime-host-repo_1.0.0_aarch64.zip软件包,解压并放到“ovs_build../package”目录中。如果dpak、dpdk和openswitch均使用自己的包,请把对应的rpm包放到空的“ovs_build/package”目录中。
1
cd ovs_studio bash install_env.s
- 为脚本添加一个服务,参考virtio-enable.service文件内容如下。
- 安装网卡驱动,安装前请先获取相关驱动包和“Hinic3_flash.bin”文件,放到“ovs_build/driver”目录中。
虚拟化卸载自动化部署
- 环境准备
- 支持四节点部署,OpenStack由控制节点、计算节点、网络节点和存储节点四部分组成;安装使用四台服务器,一台控制节点、一台存储节点以及两台计算节点,其中网络节点和控制节点部署在一台服务器上;
- SP680仅安装在计算节点,需要在BIOS中开启IOMMU、配置内存大页并安装智能网卡驱动;
- 所有节点需要关闭SELinux和防火墙,并能正常访问网络;
- 仅支持运行在物理机上的openEuler 20.03 LTS SP1操作系统。
- 安装过程
- 为所有节点配置hosts,修改hosts文件,在“/ect/hosts”文件中添加如下内容。
1 2 3 4
xxx.xxx.xxx.xxx controller xxx.xxx.xxx.xxx compute01 xxx.xxx.xxx.xxx compute02 xxx.xxx.xxx.xxx storager
xxx.xxx.xxx.xxx为具体节点的IP地址。
- 控制节点和计算节点部署前需要安装Python依赖。
1
pip3 install pymysql
- 部署控制节点。
需要在/root目录新建“.admin-openrc”文件,内容如下。
1 2 3 4 5 6 7 8
export OS_PROJECT_DOMAIN_NAME=Default export OS_USER_DOMAIN_NAME=Default export OS_PROJECT_NAME=admin export OS_USERNAME=admin export OS_PASSWORD=123456 export OS_AUTH_URL=http://controller:5000/v3 export OS_IDENTITY_API_VERSION=3 export OS_IMAGE_API_VERSION=2
创建完成后执行如下命令使之生效。
1
source /root/.admin-openrc
执行部署脚本。
1 2 3
cd dpak_studio hostnamectl set-hostname controller python3 install.py
- http://controller:5000/v3中的controller需替换为控制节点IP地址。
- 安装过程中需要多次输入密码,自动化部署仅支持密码为123456。
- 部署计算节点,安装前请先获取DPU软件包,并放到“dpak_studio”目录中,两台计算节点之间需要配置免密登录。
计算节点一。
1 2 3
cd dpak_studio hostnamectl set-hostname compute01 python3 install.py
计算节点二。
1 2 3
cd dpak_studio hostnamectl set-hostname compute02 python3 install.py
- 部署存储节点,需要配置免密登录到控制节点和计算节点。部署前需要先在存储节点上安装crudini。
1 2 3 4 5
wget https://github.com/pixelb/crudini/releases/download/0.9.3/crudini-0.9.3.tar.gz tar -xf crudini-0.9.3.tar.gz cd crudini-0.9.3 sed -i "s?env python?env python3?" crudini cp crudini /usr/bin
安装ceph。
1 2 3 4 5
hostnamectl set-hostname storager cd dpak_studio mkdir /etc/ceph cp ceph_install.sh /etc/ceph cd /etc/ceph
enp125s0f0为用户存储面的网口,sdb、sdc、sdd为用户创建OSD的空白块设备。
1
sh ceph_install.sh enp125s0f0 sdb sdc sdd
- 为所有节点配置hosts,修改hosts文件,在“/ect/hosts”文件中添加如下内容。
父主题: DPAK应用