项目背景:整合集团旗下各子公司的销售数据,通过技术手段将数据抽取过来,经过数据清洗加工后,存入库中,再使用大屏可视化数据图表的方式展示出来.
项目架构:整个系统分为2个部分,一部分是数据采集系统、一部分是数据分析系统。数据采集系统技术选型 SpringCloudAlibaba+Kafka+MybatisPlus ,数据分析系统采用帆软来进行实现。
使用的技术点:SpringCloud、redis、Kafka、mycat、ETL、MybatisPlus 、BI 数据分析、微信小程序
主要负责以下4个层面的工作:
1.项目需求分析阶段,参与项目的架构设计、技术选型、数据库设计、配合产品制作系统原型,拟定工作计划,跟进工作进度等
2.项目编码阶段、依据需求文档,在数据采集系统中的各个服务上开发数据采集的接口,用于接入几十家第三方不同系统的数据源,将各类数据加工后发送入 Kafka中。
3.负责数据分析系统 BI 数据分析工作,使用帆软平台,进行分析图表模板的制作,数据集制作等工作。
4.负责项目运维工作,全过程参与项目的部署与配置,维护平台运行,部署视频流插件,帆软大屏部署,配置域名,S