01挑战
基于业务系统,现有Oracle、DB2、MongoDB等多种类型的数据库,每个数据库对应一个归档库。存在以下问题:
- 数据复制方式多样,维护复杂
- 不利高可用、扩展性、安全性方面的统一管理
- 归档数据孤岛,影响业务创新
02方案
使用MongoDB实现数据库统一归档:
- 通过脚本定期归档至MongoDB
- 结构化、非结构化、半结构化数据源方便存储于MongoDB中
- MongoDB分片集群添加服务器横向扩展
03效果
- 对不同的历史库归档作业统一管理,统一维护,统一分析。
- 高可用,扩展性,安全性满足企业级需求。
- 随着数据量的增加,简单添加服务器即可对集群扩容,管理维护成本低。
- 为后面2阶段的数据聚合,数据分析,形成数据中台打下基础。
04建设规划
- 1 阶段:构建平台、导入数据
- 2 阶段:数据聚合、模型转换
- 3 阶段:数据分析、用户 360







