文档HOT
中文
注册
我要评分
文档获取效率
文档正确性
内容完整性
文档易理解
提交
在线提单
论坛求助
鲲鹏小智

OmniMV物化视图环境要求

安装OmniMV物化视图特性前，请参考本节提前准备软硬件安装环境，以确保后续安装操作顺利进行。

硬件要求

集群中各节点硬件要求如表1所示。

表1 硬件要求

硬件环境

管理/计算/存储节点

处理器

鲲鹏920 5250处理器

内存大小

384GB（12 * 32GB）

内存频率

2666MHz

网卡
  • 业务网络10GE
  • 管理网络GE

硬盘
  • 系统盘：1 * RAID 0（1 * 1.2T SAS HDD）
  • 数据盘：12 * RAID 0（12 * 8T SATA HDD）

RAID卡

LSI SAS3508

操作系统和软件要求

集群中各节点操作系统和软件要求如表2所示。

表2 操作系统和软件要求

项目

版本

说明

管理节点（Server）

计算/存储节点

操作系统

openEuler 22.03 LTS SP1

-

√

√

JDK

BiSheng JDK 1.8（优选BiSheng JDK 1.8.0_342）

openEuler 22.03 LTS SP1与BiSheng JDK 1.8.0_262不兼容，需更换为BiSheng JDK 1.8.0_342。

√

√

Hadoop

3.2.0

部署指南请参考：《Hadoop 集群部署（CentOS 7.6&openEuler 20.03）》

√

√

Hive

3.1.0

部署指南请参考：《Hive 部署指南（CentOS 7.6&openEuler 20.03）》

√

-

Spark

3.1.1

部署指南请参考：《Spark 部署指南（CentOS 7.6&openEuler 20.03）》

√

-

ZooKeeper

3.6.2及以上

部署指南请参考：《ZooKeeper 部署指南（CentOS 7.6&openEuler 20.03）》

-

√

ClickHouse

22.3.6.5

-

√

√

Python

3.10.2及以上

-

√

√
  • √：是指对应节点需要安装该项目。
  • -：是指对应节点不需要安装该项目。

软件获取

安装OmniMV物化视图所需软件安装包及其获取方式如表3所示。

表3 OmniMV物化视图软件获取列表

名称

包名

发布类型

说明

获取地址

OmniRuntime压缩包

BoostKit-omniruntime_1.1.0.zip

闭源

OmniRuntime压缩包，解压可获得OmniMV物化视图软件安装包（BoostKit-omnimv_1.1.0.zip）。

鲲鹏社区：Link

说明：

使用软件包前请先阅读《鲲鹏应用使能套件BoostKit用户许可协议 2.0》，如确认继续使用，则默认同意协议的条款和条件。

OmniMV Plugin的JAR包

boostkit-omnimv-spark-3.1.1-1.1.0-aarch64.jar

开源

使用OmniMV物化视图能力时，Spark引擎扩展包。

Link

OmniMV日志解析JAR包

boostkit-omnimv-logparser-spark-3.1.1-1.1.0-aarch64.jar

开源

使用OmniMV物化视图解析Spark日志时使用的功能包。

Link

hive-testbench

hive-testbench-hdp3.zip

开源

生成TPC-DS/TPCH数据时使用的TestBench源码包。

Link

软件安装包完整性校验

从鲲鹏社区获取的软件安装包，下载软件安装包后需要校验软件安装包，确保与网站上的原始软件安装包一致。

校验方法：

  1. 获取软件数字证书和软件安装包。
  2. 在如下链接中获取校验工具和校验方法：

    https://support.huawei.com/enterprise/zh/tool/pgp-verify-TL1000000054

  3. 参见上述链接下载的《OpenPGP签名验证指南》进行软件安装包完整性检查。
父主题： 环境要求