个人介绍
工作经历
2024-01-01 -至今广西智桂通科技有限公司后端开发已认证
主要从事内部系统开发,政务相关开发和数据开发部分接口通过平台授权第三方调用。1.埋点系统开发:通过前端脚本收集用户访问和点击的信息,通过kafka传输到数据仓库进行存储。每日定时分析这些用户信息,计算页面pvuv等数据,通过BI工具展示,帮助公司更好分析业务方向。2.实时数仓:搭建实时信息处理平台,在埋点系统的基础上在更多维度去分析用户数据 涉及技术栈:Java,springboot,kafka,es,Hadoop,flink,starrocks等
2022-06-01 -2023-12-01中移(杭州)信息技术有限公司后端开发工程师已认证
主要从事HDICT类项目的后端研发工作,主要使用springboot和springcloud框架进行开发,熟悉Redis,MySQL数据库和Kafka,ElasticSearch等中间件,熟悉部分大数据开发组件如flink。在职时负责的项目开发:1.乡村通讯录系统,该系统是乡村模块功能核心,许多功能以此为基础。其包含通讯录正常的增删改查,组户构建,标签分类,用户信息同步等功能。2.运营分析平台,该系统负责汇聚和展示数据,便于可视化分析。系统每日定时将前一日数据仓库中的数据跑出存入MySQL供调用,前端负责展示数据。获得2023年第一季度部门优秀员工
教育经历
2019-08-01 - 2022-06-01浙江工业大学计算机技术硕士已认证
浙江省优秀毕业生,2021年度校一等奖学金,在校主要研究IOT方面的可见光通信研究,发表sci2区文章一篇,
资质认证
技能
该系统用于分析APP用户访问数据以及每日访问游客量,页面访问量等数据的统计。其分为数据层,数据处理层和数据展示层。前端通过js脚本收集数据后,后端基于springcloud的数据收集微服务对数据进行校验和加工,然后将数据送入kafka消息队列中,最后存入elasticsearch中供后续数据查询和定时任务计算。同时,有一个数据定时计算服务每小时计算和更新用户访问数据,有一个数据查询服务提供接口给用户和其他系统查询数据。最后通过BI工具展示各个维度的数据。
该系统用于查看各项业绩指标的完成情况。该系统背后是一套大数据仓库,其以Hadoop为底座,结合使用spark,flink等大数据组件每日对每日的埋点数据进行任务计算,得出指标后定时存入MySQL数据库中,再由springcloud全家桶构成的微服务来读取和导出。前端界面会显示关键数据的走势图以及环比数据,还支持各个时段数据的查看,导出等功能。我在其中负责数据的读取和返回,构建后端数据模型,配合数据同事将关键指标数据及时加入页面。该系统能较好的解决数据统计难,复杂,画图麻烦等痛点,仅配置一次就能稳定地展现数据,使用docker镜像部署,扩容方便。