0
1
2
3
4
5
0
1
2
3
4
5
2天前在线
java-spark开发工程师
上海全职 · 800/日 · 17400/月信用正常
工作时间: 工作日00:00-00:00、周末00:00-00:00工作地点:
远程
服务企业:
0家累计提交:
0工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
我是程序员客栈的【js】，一名【java-spark开发工程师】； 我毕业于【上海理工大学】，担任过【花旗银行】的【java-spark开发工程师】，担任过【IBM公司】的【java工程师】； 负责过【交易数据处理系统】，【银行卡申请审批系统】，【GSST系统】的开发； 熟练使用【java】，【python】，【spark】，【hive】，【vue】； 如果我能帮上您的忙，请点击“立即预约”或“发布需求”！
工作经历
2019-07-08 -至今花旗金融java-spark开发工程师
2021.09-至今 Citi Group Spark-java 大数据开发 工作描述: 交易数据模型分析处理 ETL 数据开发 2021.09-至今 1.参与公司 ETL 项目的需求分析、设计、开发、维护工作,完成对数据的抽取,清晰,转换,写入。 2.负责数据开发中的数据监控，保障数据的安全性和一致性，积极决解数据开发过程中出现的问题，确 保项目顺利进行。 3.编写自动化脚本,对项目的性能、日志等配置自动化脚本进行监控。 Java 前后端开发 2022-10 至 2023.04 1.参与项目的需求分析,研究项目功能实现细节。 2.根据新项目开发进度和任务分配,开发相应软件;根据需求及时修改完善软件。 3.使用 augular 开发前端页面，Spring Boot 开发后端 API。 2019.07-2021.08 IBM(上海分公司) Java 开发 工作描述: 银行系统开发维护 Java 开发 1、 重构业务代码，同时进行新旧框架重构的比较测试。 2、 负责 UT(Junit 单体测试)，编写测试观点和进行前后端联调测试。
教育经历
2015-09-01 - 2019-07-01上海理工大学电子信息工程本科
1.技能: 计算机 Java 程序设计员: 技师/二级，高级/三级 微软: Azure900 认证 2.英语: CET-4， 外企工作 5 年
资质认证
技能
作品
基于公司 Global Systematic Stress Test 业务构建的大型数据分析平台，日均数据处理量 1TB，对上 游每日的数据 进行离线分析、处理、清洗后写入数仓。构建交易数据的离线与实时数据仓库，设计数据 模型，ETL 实施，ETL 性能优化， ETL 数据监控，提升数据架构扩展性，支持数据产品的快速迭代和横向 扩展。该项目使用 Java 语言通过 Spark 和 Hive 构建数仓，包括数据抽取，转换和加载，确保数据的 高效处理和整合。同时进行 Spark 性能调优，每天固定时间数据会更新，需要及时处理 确保性能稳定， 编写自动化监控脚本。
02024-10-02 17:24
