- 场景概述基于国产自主可控战略,完成去CDH,CentOS替换,Oracle清零等任务,构建性能优异的国产化大数据平台,具备多源异构数据采集、海量数据存储、数据分析等能力,实现数据平滑迁移,业务平滑割接,以解决话单查询、标签查询、数据集市等20多种日渐复杂的业务
核心痛点
- 打造流批+湖仓一体架构,满足BMO域,20+类数据源入湖
- 解决计算组件在鲲鹏CPU下的性能调优,支持数仓10万+库表、6000+日账任务、2亿+文件数据处理能力,提升整体大数据集群计算效率
- 三个异地私有云大数据中心联动,实现数据、业务的平滑流转,解决业务汇总分析难、数据孤岛等问题
方案成效
- 解决数据冗余、数据一致性问题
- 流批一体,提升数据时效性
- 支持结构化、半结构化、非结构化数据
- 所有组件自研优化调优,性能、稳定性得到保证
- 统一运维,翼MR Manager管理能力
- 满足省公司核心业务数据应用需要