方案架构
鲲鹏BoostKit大数据总体架构主要由硬件平台、操作系统、中间件、大数据平台构成,其中大数据平台支持华为自研的FusionInsight大数据平台以及开源Apache、星环、苏研大数据平台。
鲲鹏BoostKit大数据总体架构如图1所示。
名称 |
说明 |
---|---|
硬件基础 |
提供基于华为鲲鹏处理器的鲲鹏服务器,高速缓存场景支持使用SSD进行加速。 |
操作系统 |
支持主流的商用、开源操作系统和国产化操作系统。 |
加速特性 |
支持鲲鹏指令加速Erasure Code编解码,芯片自带加解密加速器,提供算法与指令优化的KAL机器学习加速库。 |
编译器 |
JDK、GCC、LLVM等常用的大数据编译器中间件均支持鲲鹏产业生态。 |
大数据组件 |
支持开源众多大数据组件,包括核心的Hadoop、HBase、Spark、Hive、Flink、Elasticsearch等。 |
大数据平台 |
支持华为自研的FusionInsight大数据平台以及开源Apache、星环、苏研大数据平台等。 |