0
1
2
3
4
5
0
1
2
3
4
5
大数据工程师
上海全职 · 300/日 · 6525/月信用一般
工作时间: 工作日09:00-05:00、周末11:00-04:00工作地点:
远程
服务企业:
0家累计提交:
0工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
4年大数据领域经验，主导过PB级数据平台架构设计与落地，精通实时/离线数据湖仓、分布式计算与数据治理，具备从0到1构建企业级数据中台的能力。熟悉金融、电商领域业务场景.
技术栈核心能力：Hadoop/Spark/Flink｜Hive/Kylin｜Kafka/Pulsar数据湖仓：Delta Lake/Iceberg｜AWS Redshift/阿里云MaxCompute云平台：AWS EMR/S3/Glue｜阿里云DataWorks编程语言：Scala/Python/Java｜SQL优化｜Shell数据治理：Apache Atlas/DataHub｜元数据管理｜数据血缘可视化：Superset/Grafana｜Tableau工作经历
2020-09-07 -2025-01-01上海新帕信息科技有限公司大数据工程师
1.参与数仓的架构选型，搭建集群、配置组件 2.收集用户数据，对数据进行存储 3.完成不同主题的指标分析，使用调度框架定时调取脚本 4.使用数据同步工具将计算指标存储到数据库便于前端展示
教育经历
2016-09-01 - 2020-07-01河北科技学院计算机科学与技术本科
