英语
普通话
0
1
2
3
4
5
0
1
2
3
4
5
1月前来过
资深大数据开发工程师
合肥全职 · 500/日 · 10875/月信用一般
工作时间: 工作日18:00-11:00、周末09:00-22:00工作地点:
远程
服务企业:
0家累计提交:
0工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
【个人信息】
昵称/标签：数据中台架构师 | 7年JavaWeb+大数据全栈开发
领域专注：工业大数据实时分析 | 数据中台建设 | 面板显示行业解决方案
【核心能力标签】? 硬核技术栈
Java Scala Kudu Impala Scala Flink Kafka 数据湖（Delta Lake/Hudi） Spark 数据治理
工业IoT数据分析 实时计算优化 SpringBoot Mybatits Oracle mysql
? 垂直行业经验
▸ 面板显示行业：设备实时监控、生产良率分析、供应链数据建模
▸ 制造/能源行业：MES系统对接、时序数据存储优化、故障预测
【我能为你解决什么问题】场景1：数据中台建设✔️ 从0到1搭建企业级数据平台（数据采集→实时计算→可视化）
✔️ 现有数仓迁移到湖仓一体架构（Hudi/Delta Lake选型实施）
✔️ 数据血缘治理（Apache Atlas集成）
场景2：实时流处理优化✔️ Flink作业性能调优（Checkpoint耗时降低50%+实战案例）
✔️ Kafka集群吞吐量提升与消息积压治理
✔️ 设备告警规则引擎开发（毫秒级延迟保障）
场景3：行业定制开发✔️ 面板缺陷检测数据看板（OpenCV+ECharts融合开发）
✔️ 生产排程优化算法实现（遗传算法+Spark分布式计算）
✔️ ERP与MES系统数据孤岛打通
场景4：第三方支付系统✔️ 根据公司要求接入各银行支付接口（SpringBoot+Vue）
✔️ 账户提现、转账、对账等核心功能实现
场景5：大屏可视化系统开发✔️ 根据业务要求进行数据汇总统计，并进行大屏展示（帆软）
✔️ 实现数据采样，并进行数据实时查询、离线查询和数据预测等核心功能（RTMP协议+Spark+SpringBoot）案例1：面板厂实时良率分析系统
▸ 技术架构：Flink CDC实时捕获MES数据 + Hudi存储历史批次数据 + Grafana可视化
▸ 成果：良率问题定位时间从2小时缩短至5分钟，年节省质量损失超300万元
案例2：某能源集团数据中台升级
▸ 实施内容：Hive数仓迁移至Delta Lake，构建统一元数据管理
▸ 效果：跨部门数据查询效率提升8倍，存储成本降低40%
工作经历
2016-06-01 -至今合肥城市智能资深大数据开发工程师
数据平台架构设计与搭建：负责大数据平台的整体架构设计，选择合适的大数据技术栈，如 Hadoop、Spark、Flink 等，搭建稳定、高效、可扩展的数据处理平台。 数据处理与分析：对海量数据进行清洗、转换、加载（ETL），构建数据仓库和数据湖，运用数据挖掘和机器学习算法进行数据分析，为业务决策提供数据支持。 性能优化与调优：监控大数据平台的性能指标，对数据处理流程和算法进行优化，提高数据处理效率和平台稳定性，降低资源消耗。 数据安全与管理：制定并实施数据安全策略，确保数据的保密性、完整性和可用性，负责数据的备份、恢复和权限管理。 团队协作与技术指导：与数据分析师、算法工程师、业务团队等紧密合作，理解业务需求，提供技术解决方案，指导初级开发人员提升技术能力。
教育经历
2009-09-01 - 2013-07-01淮北师范大学网络工程本科
