项目描述： 该项目主要为公司研发的实时线索系统，支持高并发量的用户数据请求。并经过一系列 内部处理后发送给坐席系统，用于坐席系统的后续跟进 工作内容： 1.配合架构师进行框架的搭建、项目基本公共服务的接入 2.实时数据进入、流转、除黑、除重等核心功能模块的设计与开发，核心代码编写 3.对异常数据的捕获、补跑等功能的设计，及接口规范制定 4.其他常规功能开发

项目描述： 一个基于实时计算、统一服务API、报表于一体的数据化服务平台，旨在为业务提供高 性能的、高稳定的、跨多数据源的数据治理、服务、展示平台 工作内容： 1. 调研市场当前的数仓搭建方案，制定符合我们部门的数仓搭建方法 2. 经过反复调研、POC，决定使用基于Flink流、FlinkSql、Kafka、TiDB、D一体化 的实时数仓方案 3. 主要负责搭建基于公司微服务框架ARK的统一服务API平台与报表平台，后台、 前台框架搭建、流水线部署、公司公共服务接入等 4. 统一服务API平台中实现项目自定义添加数据源、 可基于数据源的配置化API接口， 目前支持的数据源有MySql、 Oracle、 Druid、 PG、 Hive、 Presto、 Doris、 Hbase、 TiDB等 5. 报表平台目前主要实现了报表的页面可配置化、定期执行、缓存等功能，可实现业务 报表的快速上线运行 6. 对于现有的离线hive数据与实时关系型数据库无法聚合查询的问题， 目前使用的是 Presto进行跨库查询，目前正在POCDoris方案，希望其能替代Hadoop组件复 杂的问题

项目描述： 该项目主要为公司研发用于总部人员与分中心人员， ，其核心功能为根据大数据平台提 供的用户的多维标签，对用户进行分群、分类营销等功能 工作内容： 1、重构的前期调研、老系统功能梳理 2、项目框架搭，前后端分离的分布式应用，主要负责前端框架的搭建，后台公共服 务接入 3、参与用户分群营销核心功能用户分群营销模块的设计，技术选型，首套方案采用 Sqoop、Oozie、Hive、Druid、Quartz 4、编写用户分群营销核心代码，整套流程开发 5、指导其他开发进行配套模块的开发并进行联调 6、为解决在JOB多、调度频繁情况下quartz死锁情况，废弃原有的quartz， 引入xxl-job，为适配本项目，修改权限校验、异常机制等部分源码 7、为解决首套方案性能无法满足业务，研究Clickhouse列式存储数据库，并引入项目中，目前取得了不错的性能提升 8、为解决公司原有KETTLE同步工具发版不够灵活、学习成本高等问题，引入 DataX数据同步方案，修改其源码，增加异步回调机制，以满足数据同步快速上线，目 前相关数据同步基本已全部迁移基于DataX，兼容HDFS引擎等的核心同步模块 9、公司原则是要脱O，在这个基调下，引入TiDB数据库，重构关联系统下发等 功能，目前取得了不错的效果，实现在本年底由一个重Package的系统到脱O系统的 跨越