0
1
2
3
4
5
1月前来过
资深研发专家
上海全职 · 1000/日 · 21750/月信用正常
工作时间: 工作日20:00-23:00、周末08:30-23:00工作地点:
上海远程
服务企业:
0家累计提交:
0工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
（1）6 年大数据开发与架构工作，熟悉Flink、Spark、Hive、Hadoop等大数据常用框架；
（2）负责实时计算项目架构设计，框架搭建，并带领团队进行项目开发；
（3）负责离线Spark数据处理项目开发、Hive大数据仓库建设；
（4）10年以上Java开发经验，精通常见设计模式，能够设计开发出优雅、高效的程序，熟悉Spring、Spring MVC、Mybatis等Java核心技术框架；
（5）解决负责范围内的系统，线上问题，疑难问题跟踪排查；
（6）熟练Redis、Kafka、Zookeeper周边中间件；
（7）熟练互联网金融、物流（wms）业务；
大数据主要项目成果： 金融人群标签平台、金融智能引擎、金融数据集市；
金融业务项目成果： 金融风控平台建设、数据治理平台；
工作经历
2021-08-01 -至今唯品会金融技术部资深研发专家
职责业绩： 1.负责金融人群标签平台（实时计算）架构设计，核心功能包括：Redis数据存储格式优化、Storm框架向Flink迁移工作，并带领团队进行功能开发； 2. 负责金融智能引擎系统迭代开发与升级，典型的功能包括：地址标准化模块优化，ElasticSearch组件升级（由5.26升级到7.71版本）等； 3. 负责金融风控系统流程引擎，决策引擎，规则引擎迭代升级，系统架构优化，决策引擎切换，由益博瑞引擎切换到FICO引擎； 4. 解决负责范围内的系统，线上问题，疑难问题跟踪排查；
2017-04-01 -2020-07-31唯品会金融技术部资深研发专家
职责业绩： 1. 完成数据治理（主要包括数据地图、数仓表血缘、数据质量）项目建设，为上下游团队提供了数据指引，降低沟通成本，节省数据开发时间； 2. 完成风险数据集市、催收数据集市、人行征信数据集市建设，为各个数据应用提供通用支持；
2015-07-09 -2017-03-31唯品会物流信息部高级开发工程师
职责业绩： 1.完成物流仓库数据应用平台建设，平台实现无需发布，在线数据处理，节省了部署发布，异常刷数等人力投入； 2.完成物流数据仓库中间层建模，为库内时效、供应商时效、TMS配送时效，提供数据通用性支持（原来数据烟囱现象突出，各模块开发需要从头开始）；
2011-10-10 -2012-09-30上海巨耕电气有限公司java项目经理
职责业绩： 1. 作为项目leader，负责项目需求设计，系统架构及上线，负责核心代码开发，前置机多线程通信，电力指标数据采集模块功能编写； 2. 项目工作拆分，根据模块难易程度和团队人员技术特点进行任务适配，解决项目中的疑难问题，例如：多线程死锁问题； 成绩： 1. 完成煤矿电能管理系统建设； 2. 完成设备管理系统建设；
教育经历
2012-04-01 - 2016-12-31南京大学计算机及应用本科
主修课程：C++程序设计、离散数学、概率论与数理统计、计算机系统结构、操作系统、数据结构、数据库概论、计算机网络、软件工程概论、Java程序设计。 毕业论文等毕业论文： 《电能管理系统》
技能
作品
项目描述：基于数据挖掘和机器学习，针对不同业务场景进行个性化的精细化运营，达到营销预算效果最大化，从而降低成本或增加收入，协助运营人员达成金融的业务目标。 个人职责： 1. 基于Spark的地址标准化模型升级改造，地址GPS获取，实施公司数据安全战略改造（接入信息安全中央加解密系统，ES系统升级） 2. 基于Spark进行模型月报准确率数据计算（KS，PSI，稳定性打分）； 3. 风控模型监控（系统监控、打分监控、feature监控）； 4. pmml模型配置，上线打分，封装模型调用接口； 5. 负责模型配置、模型上线、算法平台已有模型维护；
02023-05-03 21:22
项目描述：基于数据挖掘和机器学习，针对不同业务场景进行个性化的精细化运营，达到营销预算效果最大化，从而降低成本或增加收入，协助运营人员达成金融的业务目标。 个人职责： 1. 基于Spark的地址标准化模型升级改造，地址GPS获取，实施公司数据安全战略改造（接入信息安全中央加解密系统，ES系统升级） 2. 基于Spark进行模型月报准确率数据计算（KS，PSI，稳定性打分）； 3. 风控模型监控（系统监控、打分监控、feature监控）； 4. pmml模型配置，上线打分，封装模型调用接口； 5. 负责模型配置、模型上线、算法平台已有模型维护；
02023-05-03 21:23
所属公司：唯品会（中国）有限公司 项目描述：提供离线、实时属性/人群数据项金融业务系统提供更加定制化、更加快速响应的人群需求， 每天支持20多个金融系统3亿多次请求服务（2021双十一大促峰值qps14万左右），适用于判断人群可以参加优化活动、可以获得免息资格，提供风控实时数据，根据人群展示个性化支付入口。 架构设计： 1. 接口域，负责各个业务系统标签接入及使用，接口服务响应能力保障； 2. 实时计算域，storm集群（3个集群、400台左右服务器），接入（商城，金融）业务库，由storm进行实时属性、人群计算，结果落Redis集群。 3. Storm目前由于运维和延迟的关系，进行实时计算系统升级，迁移到Flink，本人主要负责系统升级迁移到设计，并带领团队进行功能开发； 4. 基于spark 进行 T+1统计准实时人群、属性计算优化，由原先计算10小时缩短到3小时左右。 5. 线上标签异常问题跟踪；
02023-05-03 21:25
