fusioninsight 大数据分析平台-凯发旗舰

 
您当前位置:
fusioninsight 大数据分析平台
来源: | 作者:admin | 发布时间: 2021-08-13 | 4565 次浏览 | 分享到:

华为企业级大数据分析平台fusioninsight 包括fusioninsight hadoop和fusioninsight streaming两个组件:

  • fusion    insight hadoop包含了开放社区的主要软件及其生态圈中的主流组件,并进行了大量优化,让企业可以从各类繁杂无序的海量数据中洞察商机;

  • fusioninsight streaming是fusioninsight企业级大数据分析平台中的实时数据处理引擎,以事件驱动(event-driven)模式处理实时数据的大数据技术,解决高速事件流的实时计算问题。可以在金融、通信、交通、公共安全等领域发挥流式事件实时处理优势,提供实时分析、实时决策能力。


特性

  • 智慧高达百万维度的全量建模,深刻洞察用户行为与特征。

  • 实时:对海量数据进行在线实时处理。

  • 可信:第一家支持rbac用户组权限管理、消除hdfs明文存放;第一家支持超过1000公里以上的异地容灾。

  • 易用:原生态的大数据技术因其本身的复杂性,局限应用于自身具备强大研发实力的互联网行业,而华为fusioninsight产品针对传统行业客户设计,全自动化在线运行维护,自定义dashboard,自动化的二次开发助手,大幅降低了大数据在传统企业内部的部署难度,帮助传统企业轻松驾驭大数据业务。

技术规格

分类

指标项

规格

说明

并行计算引擎(mapreduce)

性能指标

wordcount:平均每节点处理能力(gb/分钟)

6gb/分钟

10节点集群;
节点典型配置:
cpu:e2670 2*4
内存:64g
硬盘:sas盘

terasort:平均每节点处理能力(gb/分钟)

5gb/分钟

k-means:平均每节点处理能力(mb/分钟)

400mb/分钟

bayesian:平均每节点处理能力(mb/分钟)

12mb/分钟

hive性能指标

处理能力-hiveaggregation:平均每节点处理能力(gb/分钟)

5gb/分钟

处理能力-hivejoin:平均每节点处理能力(gb/分钟)

2gb/分钟

hbase性能指标

100%随机读:平均每节点读取记录条数(每条记录1kb),响应时间小于50ms

5000 records/s

100%随机写:平均每节点写入记录条数(每条记录1kb),响应时间小于50ms

40,000 records/s

顺序扫描:平均每节点scan记录条数(每条记录1kb),响应时间小于50ms

60,000 records/s



网站地图