proginn1547476531
全职 · 300/日  ·  6525/月
工作时间: 工作地点: 远程
服务企业: 0家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

我是程序员客栈的【昵称】; 我毕业于上海交大,担任过字节跳动的后端研发和阿里云的后端研发; 负责过分布式数据采集系统,异步调度系统,智能风控平台的开发; 熟练使用java,Go语言,mysql;flume,kafka,hadoop等大数据平台。

在稳定性和系统架构上有深入经验,在字节跳动和阿里巴巴都担任小组稳定性负责人。从业三年负责项目无断连、崩溃、数据丢失、数据泄露等故障。 如果我能帮上您的忙,请点击“立即预约”或“发布需求”!

工作经历

  • 2021-07-01 -2024-05-01阿里巴巴高级后端工程师已认证

    项目一: 异步数据引擎建设 • 从 0-1 建设异步调度引擎,实现跨网络域,跨计算平台算法分钟级调度能力。替换原有手动编写脚本调度 Spark 引擎的方 式。 • 实现风控算法快速配置与上线的能力,实现算法版本配置与迭代回滚等功能。算法上线速度从 7 人日降低至 0.5 人日。 • 建立容错重试及报警机制,解决原有手动脚本带来的稳定性故障及业务运行黑盒化的问题;业务上线以来,无重大稳定性故 障。 • 建立数据链路监控机制,保证数据的准确性。解决原有系统数据丢失 50% 的问题。 • 实现黑名单浓度统计,社群构图等算法以识别社群。 项目二: 智能风控平台 • 从 0-1 建设对客智能风控平台,根据用户提供的样本训练算法模型,解决客户不会使用策略配置功能带来的用户使用成本 与门槛。 • 实现逻辑回归,线性回归等算法,解决样本正则化及自动化调参等问题。 • 建立算法验证系统,验证算法在验证集上的可靠性。算法上线后跟踪其线上效果,评估算法带来的信息增益。 • 接入 XGBT,深度学习算法,提供多样化算法选择能力。

  • 2020-03-01 -2021-07-01字节跳动高级后端工程师已认证

    项目一: 数据接入层建设 • 设计并开发了针对边缘机房日志收集的系统替换 Apache 顶级项目 Flume,满足单机 20GB/小时,3700 台机器规模的 日志收集需求。 • 重构原有的中心机房接收日志服务以应对四百万 QPS 级别数据接收需求。解决不合理重试带来的资源浪费问题,节约成 本 50%。协调 Kafka 同学提供高保障,高性能 Kafka 服务,节约运维人力 1 人天/周。 项目二: 链路数据质量建设 • 建设高质量的数据链路,将 SLA 在 2 个月内,从不足 90% 提升到 99.9%。 • 解耦外部服务,采用异步访问手段,解决 flink 任务超过 6000 核时扩容能力差的问题,解决 flink 任务重启击穿下游重要 服务的问题。 • 建立统一清晰的数据指标体系,解决数据指标不一致,数据链路维护成本高的问题。

教育经历

  • 2017-09-01 - 2020-03-01上海交通大学机械工程硕士

  • 2013-07-01 - 2017-09-01电子科技大学机械工程本科

技能

系统架构
项目管理
0
1
2
3
4
5
0
1
2
3
4
5
更新于: 07-30 浏览: 47