个人介绍
工作经历
2021-04-01 -至今唯思电子商务(深圳)有限公司高级后端工程师
1. 数据平台部后端开发工程师,丰富完善数据平台相关应用,为公司数仓和分析 师相关部门提供数据开发平台 2. 主要负责离线调度系统,数据质量系统,元数据系统,数据开发系统,权限系 统等系统的设计与开发 3. 保证线上服务稳定性,解决用户各种线上问题,为用户提出解决方案 4. 搭建应用平台组基础架构系统,包括服务注册系统,网关系统,统一权限管理 系统等 。
2019-10-01 -2021-04-01思特奇信息技术股份有限公司后端开发
负责智能测试库平台的研发,主要对公司的 PaaS, SaaS 等业务组件进行功能测 试,使用 VUE 加 Django 的 技术框架,我负责代码的重构设计,前端功能开发和部分后端功能开发的工作,以 及平台项目 Docker 容器化改造。
2019-07-01 -2019-10-01武汉软帝信息科技有限责任公司后端开发
大四学校组织实习,实习期间主要负责Python脚本的编写爬取一些网站的信息, 使用H5,CSS, JS等前端基本技术编写前端网页界面,实习期间熟练掌握了 Python语言,前端基础知识,常用的Linux操作命令。
教育经历
2016-09-01 - 2020-07-01武汉纺织大学计算机科学与技术本科
性格开朗,工作积极上进,善于突破新的技术难题,学习新技术
技能
统一权限管理系统是基于RBAC做的权限管控,所有的外部系统包括landsat .metahub等都使用其做权限管控。 ssocasbin 已经对接ldap 做统一登录获取对应用户信息。 landsat 上对应项目和任务的权限管理都是基于ssocasbin,以及任务需要使用的数据源连接信息,也做了权限管控,保证任务的安全性。
元数据系统负责采集所有数据源的元信息,包括mysql, hive, kafka 等,以及数据流转的血缘关系图,数据采集依赖landsat 离线任务,定时每天采集,数据流转的血缘主要来源于landsat 上的数据开发任务,包括离线的和实时的。 元数据系统并且对外提供API接口,查询相关数据源的元信息,以及对应表的上下游任务信息。