MapReduce服务是基于华为历经行业数万节点成功使用经验,在云上打造的企业级Hadoop大数据平台服务,一键部署,灵活弹性伸缩。
包含了Hadoop、Spark、HBase、Kafka、Storm、
Hive等丰富内核组件,帮助用户在云上轻松完成高可靠、高安全、低成本、一站式大数据平台的搭建。
使用MapReduce服务的一些大数据处理,比如说会对大量数据进行排序,属于高计算密集型业务,对于计算性能及稳定性要求较高,各个节点的计算能力要保持均衡;在计算节点之间依赖于网络进行集群数据同步,对于网络带宽存在较高诉求;计算节点在本地存在大量的数据读写,对于存储带宽有很高诉求;针对这些特点,MapReduce服务与华为云计算优势结合,推出了支持通用计算增强型(C3型)弹性云服务器规格的大数据集群。
通用计算增强型(C3型)弹性云服务器是公有云新推出的一系列性能更高、计算能力更稳定的弹性云服务器规格,搭载Intel Xeon SkyLake全新一代CPU,配套高性能网络,综合性能及稳定性全面提升,满足对业务稳定性及计算性能要求较高的企业级应用诉求。通用计算增强型(C3型)性能较上一代C2云服务器大幅提升。
• 单核整形25%↑*
• 单核Linpack70%↑*
• 内存带宽62%↑*
• 计算性能优于业界15%以上
• 全面配套25G网络
与通用计算型相比,通用计算增强型弹性云服务器提供了更大规格的CPU和内存组合,可选范围更广,同时搭载全新网络加速引擎,可为用户提供更高的网络性能。它可以支持最高带宽18G,支持PPS(Package Per Second)可高达500万。配套华为自研25GE智能高速网卡,提供超高网络带宽和PPS收发包能力。
MRS搭配C3规格虚拟机,大幅提升了集群的计算能力。
• C3相比C2在流式集群上性能有4倍的提升。
• 华为云MRS与国内其他公有云大数据服务的同等规格虚拟机对比,针对典型的大数据处理测试用例(WordCount, Terasort, Kmeans等),MRS集群的数据处理速度总体提升超过30%。具体测试结果如下:
MRS服务的收费模式对C3和其他云服务器规格没有区别。使用4U8G的C3创建一个Master节点和一个core节点的最小集群用来做Hadoop系统的学习或者测试,每小时只需要2.25元,包年购买还另有八三折的优惠。