个人介绍
本人大厂全栈工程师,擅长以下技能:
后端技能:熟悉Java,熟悉Spring全家桶原理及使用,熟悉mysql、redis数据库原理及使用,熟悉高并发架构设计及开发
前端技能:擅长前端Web***开发,熟悉vue、react等多个web前端技术,熟练使用JavaScript语言。有多年工作经验
工作经历
2018-06-10 -2023-02-20百度全栈工程师
主要负责数据中台建设,参与数据治理体系的优化与整合,负责云原生相关产品研发,对内提供通用的PAAS平台及工具,负责系统架构设计与落地,有多个项目经验
教育经历
2014-09-01 - 2018-06-01北京邮电大学计算机科学与技术本科
在校期间主要学习计算机相关专业知识
资质认证
技能
1.项目功能 容器云平台是一个应用开发支撑平台,以应用为中心,提供应用的全生命周期管理。通过容器技术提供应用运行时的环境,通过容器编排、调度技术,可实现应用计算资源进行合理的分配。容器云平台提供K8S集群节点、集群组件、业务应用的全方位监控,支持监控告警策略,支持自动伸缩策略,可通过多维度监控信息进行集群节点的自动扩缩容和应用业务的自动扩缩容。 2.负责部分 - 使用Gin、GORM等Go语言技术实现容器云平台的后端开发,通过内置K8S客户端实现K8s的资源管理,如Pod、Deployment、Ingress、Service等资源的统一管理,实现K8S监控告警。 - 使用Vue.js、Nuxt.js等技术开发容器云平台的前端
1.功能模块 实时计算平台基于Flink计算引擎搭建,可实时处理业务数据、日志数据等,为公司提供一站式实时任务开发平台,为各业务方提供实时计算数据支持,提供计算任务实时监控数据查看。通过K8s进行任务调度,优化了K8s调度器,提高任务调度效率及允许稳定度。 2.负责部分 - 负责Flink实时任务公共模块开发:基于Flink API 与FlinkConnector封装Source、Sink等算子,屏蔽Flink任务和外部存储系统如MySQL、HDFS、HBase、ES等的交互过程。 - 开发通用的Flink UDF函数,扩展了Flink SQL的表达能力。 - 集成FlinkCDC,缩短数据源采集流程,实现业务数据全、增量接入能力。自定义checkpoint触发策略。 - 负责开发Flink作业的管理功能,如:作业创建、作业配置修改、作业调试与启停、任务失败自动恢复、作业运行状态监控与告警等。 - 引入K8s作为集群资源管理,实现了Flink on K8s的部署方式,并通过在集群部署Prometheus、Grafana、log-pilot等容器实现Flink作业的监控告警、指标可视化、日志收集等功能
1.功能模块 离线计算平台负责公司离线ETL任务的开发、管理、调度等,包括业务数据的采集与转换、离线分析与计算、离线任务的调度等,可实现数据抽取与清洗,多个任务的调度开发,包括MapReduce任务,SparkSql任务,任务计算及结果输出,实现了可视化大屏展示。 2.负责部分 - 负责数据传输模块开发:基于Sqoop传输组件,实现业务数据在Hive数据仓库与关系型数据库之间的增量、全量传输,简化了离线数据传输流程。 - 负责调度模块开发:基于开源调度系统Azkaban做二次开发,实现离线作业的T+1调度,实现了任务依赖自动配置等功能,提高了任务上线效率,简化了数据入仓流程。 - 负责WebIDE开发,通过提供编辑器、文件树、工作空间等,实现了离线任务的创建、配置、调试、发布上线、版本控制等功能,提高了离线计算任务的开发与配置效率,使得公司各业务线的报表、模型训练、API调用等数据需求能得到及时的响应。
相似推荐 换一批
高级后端工程师
800元/天
武汉天喻软件股份有限公司
技能:matlab,c/c++,spring boot,C#,Python,Docker,Java,JavaScript,MySQL,Redis
高级移动端工程师
400元/天
前有米科技股份有限公司
技能:java后台,微信小程序,Android,iOS,HTML5
全栈工程师
480元/天
前快传体育
技能:Java,nodejs,html,JavaScript,MySQL,MongoDB,CSS,Android,Swift
资深工程师
500元/天
精硕科技AdMaster
技能:Node.js,PHP,react/reactjs,AngularJS,HTML5,zend-framework2,zend-framework,mean