项目背景:业务线数据不一致,导致数据割裂,需要数据中心保证数据规划性,完成数据生产到消费周期转变
实现方式:
分析现状: 基于业务逻辑分析旧数据中心的采集、生产、消费、存储的现状,并结合新业务要求确定技术方案
架构设计:基于数据链路总体采用三层架构设计,应用服务基于采用微服务设计,满足业务功能的快速迭代
基础服务建设:完成多租户用户体系设计与研发以及配置中心,提供基础服务支持
改造数据链路:开发数据采集平台,利用数据迁移工具增量迁移旧数据,无关业务场景,提供统⼀数据格式
应用体系服务:基于Nocos采用微服务架构设计,开发任务分发中心、ES搜索平台等服务支撑业务快速落地
项目职责:负责方案选型与架构设计; 负责改造数据链路,建设数据中心及应用服务体系
项目成果:成功整合业务线数百GB数据,完成数据链路T+1到T+0的周期转变,支撑新业务快速发展