大云系列产品 大云商业智能套件 BC-BI BC-BI套件是为企业大数据应用开发提供的一套完整的一站式大数据解决方案,提供批采集处理能力、流采集处理能力、机器学习、数据可视化能力,助力企业在大数据时代更敏捷、更智能、更具洞察力。
产品优势 核心功能 应用场景 客户案例
产品优势
一站式 内置丰富的开发工具,数据的采集、清洗、门户搭建等都可以上一站式完成。
合作开发 可灵活组建项目组,并按需申请数据和资源,快速完成应用开发及上线。
可视化 所有功能提供可视化操作界面,符合用户的使用习惯,方便无基础用户轻松上手。
完善运维 提供完善的调度监控和便捷的告警管理,实时监控任务运行状态,避免业务故障。
核心功能
批采集处理 批采集处理工具(BC-ETL)是一种面向离线数据抽取、转换和加载的工具,它基于Spark和MapReduce分布式框架构建,实现高性能海量数据的传输和处理。
流采集处理 流采集工具主要解决实时数据采集和传输问题,支持接入多种数据源(如OMC、性能、资管数据,日志数据等)中连续捕获和传送数据。流处理工具是一个基于分布式架构的流式在线开发工具,兼容开源标准的流处理框架,预集成kafka,Storm,Spark Streaming、Flink等,提供高效、实时、可灵活扩展的流数据处理能力。支持用户通过可视化操作轻松调度流计算引擎及周边模块,迅速构建应用程序,实现实时数据处理。
机器学习 机器学习工具可降低机器学习使用门槛,提供可视化的操作界面来编排模型的训练、评估和预测过程,无缝衔接数据分析和预测应用,降低机器学习模型的生命周期管理难度,为用户的数据挖掘分析业务提供易用、高效、高性能的服务。
数据可视化分析 数据可视化分析工具,提供智能化数据建模工具,极大降低数据的获取成本和使用门槛;提供拖拽式操作方式和丰富的可视化图表控件,帮助您轻松完成数据透视分析、业务数据探查、报表制作、数据大屏开发和数据门户搭建等工作。
应用场景
搭建企业级大数据平台 为了让企业开发人员更专注于业务,BC-BI提供一站式开发平台,完善的开发管理能力,成熟的业务扩展方案,让开发人员无需关心软硬件资源及大数据底层实现即可快速完成应用开发。对于企业可降低投资、运维成本,可极大减少研发投入。推荐搭配使用:BI+BDPaaS+DMS。
实时日志采集与分析 通过实时采集功能,大规模低成本接入实时日志数据(包括上网日志、家宽等)。提供高效易用的实时计算服务,并提供完整的进度监控,报警等功能。数据投递功能可以将日志数据投递至存储类服务,进行分析查询。同时提供可视化分析工具,对日志数据进行分析和展示。推荐搭配使用:流采集处理+数据可视化分析。
客户案例
BC-BI产品累计2018年提交7项专利,均已通过集团评审。并获得由中国移动集团办法的“科技创新奖二等奖”。子系统BC-ETL 于2017年入选中央机关集采目录。该产品已广泛应用于中国移动集团总部、省公司及专业公司等22个单位29个项目的生产系统,并成功拓展了京东方、国家气象局、中央电视台、浙江旅游局等外部客户,树立了中国移动信息技术专家的形象。
中国移动供应链大数据分析系统 应用背景:
中国移动供应链信息化横跨需求、采购等多个环节,覆盖投资计划类和成本费用类端到端的供应链生产流程管理,是公司内业务运营流程最长、复杂度最高的管理链条。因此,为集团采购部搭建供应链大数据平台,支撑公司低成本高效运营成为当务之急。
解决方案:
整合全流程供应链数据源,承载和托管各项供应链分析数据,定制化开发算法模型和应用,充分发掘数据价值,通过多维度数据分析深入挖掘供应链运营规律,形成统计分析、数据共享、监控预警、智慧运营四大能力,支撑供应链生产高效运营。
方案成效:
基于大云商业智能平台,整合采购共享中心供应链系统SCM、招投标系统ES、电商平台等数据近400T(每日持续增长中),定制开发了采购执行分析、采购需求预测等多个应用分析模型。从系统完成之后,三大系统持续接入数据,为数据分析提供有力支撑。截止目前为止,平台内约存储数据400T,每日增长约409G。项目一期建立6大专题,11个分析模型。项目二期根据一期情况,增加专题和分析模型。共计7大专题,21个分析模型全力支撑了集团采购共享中心主办的《供应链大数据分析和全流程贯通最佳实践交流会》为落实2018年集团采购工作会精神,推动供应链大数据和全流程贯通最佳实践,获得集团和省公司高度评价,并获得合作意向。
上海移动统一聚合平台 应用背景:
2016年-2018年,中移软件大数据与信运部深入开展的大数据平台建设工程,从数据引入、数据管理、应用接入等方面,持续引入大数据核心能力,对接多种数据及应用能力。统一汇聚平台自一期建设至今,面临如下难点:
1.数据采集需求与日剧增,且需求不断变化,一成不变的采集能力,无法支撑不断改变的数据采集需求;
2.应用对集群的性能要求更高,大规模扩容劳民伤财;
3.大数据部门为上海移动定制化的统一汇聚平台,随着业务量的增长,维护难度越来越大;
解决方案:
为应对以上难点,统一汇聚三期开启平台的持续优化建设:
1.定制化版本—>标准化:一方面在中移软件标准化产品中融入上海移动的大数据流处理能力精髓,另一方面引入中移软件产品新特性;
2.采集能力不断优化提升:降低产品使用门槛、提升运维任务运维便捷性、开始支持flume采集任务配置化;
3.多集群能力初建:多套大数据集群统一管理,多集群任务统一调度。
方案成效:
1.进博会期间日均采集约80T信令数据,峰值采集约29亿条/10min,峰值数据吞吐量577亿条/10min。
2.实现采集灵活配置、多路分发、多集群纳管,共计600+服务器,支撑性能管理平台、网优质量分析、智慧场馆、智慧公安等20+应用。进博会期间大数据平台零故障、零投诉、零失误。
3.“智慧场馆综合管理系统、智慧公安”整个系统从数据采集、数据预处理到最终的数据展示,整体时延保持在5min内,很好得支撑了峰值9.3w客流量、日均7.2w客流量的保障工作。
4.“网优日常通信保障”系统重点对用户通信指标进行实时保障,主要实现网优质量监控、网优实时保障、资源管理以及网络容量管理。