大云系列产品 大云Hadoop平台 BC-Hadoop BC-Hadoop是中移(苏州)软件技术有限公司发行的中国移动统一版本Hadoop套件商业版,该产品是基于Apache社区版本进行二次开发和全面优化,为内外部企业提供性能优越、安全可靠、高效易用的大数据基础平台。
产品优势 核心功能 应用场景 客户案例
产品优势
性能优越 提供超大规模集群支持,优化资源存储和调度机制,深度调优开源组件。
安全可靠 核心组件支持统一认证与鉴权,所有组件支持高可用和多副本容灾机制。
高效易用 提供各种可视化运维工具及改善系统性能等平台周边工具。
服务支持 提供专业售前咨询、交付支持、产品培训等服务,负责维护和升级产品版本。
核心功能
数据采集 使用Flume和FTP进行日志文件等数据采集。
存储调度 使用HDFS、Kafka和HBase进行数据存储,统一通过YARN进行资源调度。
访问服务 支持包括批处理、流计算、AI智能各方面十多种计算模型,包括MapReduce、Hive、Spark、Flink、TensorFlow等。
应用场景
运营商 业务数据存储与处理,上网日志存储与分析,帐详单存储与查询,数据实时计算与分析等,流量经营分析、信令分析、家庭宽带业务分析等。
金融 数据检索和实时查询,用户数据分析挖掘与风控预警,用户细分与特征建模,用户信用体系建设等。
医疗 医疗系统与信息平台建设,临床数据分析与挖掘,降低药物研发成本、实现精准治疗,数据实时传输与处理,实现远程监控与急救等。
客户案例
大云Hadoop平台产品自2014年开始研发,已在中国移动集团总部、各省公司、各专业公司,以及国家气象局、浙江省旅游局等30多家内外部单位落地推广并商用。该平台累计部署节点近万个,现网运行最大单集群约1600节点。目前已申请专利12篇,获得授权软著4项,获得2018年中国电子学会科技进步奖二等奖等10余项行业奖项和证书,累计收入超过3亿元,为中国移动集团及外部市场客户节约大数据平台及应用的建设维护开支约4亿元。
中国移动集中化经营分析大集群建设项目 2016年至今建设中国移动集中化经营分析系统Hadoop云基础平台,一二期共部署近3000个节点,三期预计扩容至14000个节点。运行最大单集群约1600节点,总数据量达63PB,日接入数据500TB,日均运行作业约3万。实现全网数据的统一采集、存储、计算和能力集成,以及超大规模Hadoop集群、异地集群等性能优化,更好地支撑互联网分析、流量运营、用户上网详单查询等全网共性应用场景。
内蒙移动企业级大数据平台建设项目 2016年至今引入大数据中心整体解决方案,构建企业级大数据共享平台和完整的数据治理体系,部署544个节点,将Hadoop+流计算+MPP+传统数据仓库混搭,形成1个基础平台+N个上层应用的体系架构,并以多租户形式提供按需分配、动态调整的服务机制。数据引入从1周缩短为1天,应用开发和上线速度从2个月缩短为3~7天。从而实现平台资源共享和开放,支持上层应用百花齐放。