个人介绍
我是程序员客栈的【KempinWei】,一名高级程序员; 我毕业于【兰州理工大学】,担任过【普信恒业科技发展(北京)有限公司】的【数据平台高级开发工程师】,担任过【天曦网络科技有限公司】的【高级研发工程师】; 负责过【大数据中台】,【财富管理平台】,【微服务管理平台】的开发; 熟练使用Spring,springMVC,spring-boot,sping cloud,mybatis,mybatis-plus,redis,easyexcel,XXL-job,DolphinScheduler,sharding-sphere,kafka;
工作经历
2018-12-06 -2024-07-05普信恒业科技发展(北京)有限公司数据平台高级开发工程师已认证
1.大数据中台元数据研发 项目简介:服务于大数据中台,提供多种类型数据库(hive、kudu、spark3)的访问与维护。以业务属性分为不同的项目,支持DDL建表、图形建表、表结构修改、表清空、表删除、表分区删除。维护元数据信息、字段业务描述、表生命周期,记录表的操作记录、所属人变更、查看建表语句等信息。提供跨项目表授权、对外发布、表申请、表数据上传、引入外部数据库等。 责任描述:负责中台元数据相关功能的需求评审、方案设计、功能开发、测试、线上问题解决及后续版本迭代。 2.数据地图研发 项目简介:基于ElasticSearch,提供数据资产多维度查询。查询条件有项目、表名、表描述、字段名、字段描述、表类型、表热度(7天、30天、60天、90天、180天)、表资产目录等信息。 查询结果按表名称、表30天热度、存储大小排序。 详情信息包含:表的使用热度、表相关批量任务(按使用渠道、时间段、读写统计表热度)、表的元数据信息、分区信息、存储大小、数据量、数据更新时间、表在中台操作记录、表权限项目等信息,导出。 管理项目提供资产目录新建、修改、授权,表目录、表描述、字段描述批量修改功能。 责任描
2017-03-13 -2018-11-30天曦网络科技有限公司高级研发工程师
微服务管理平台,又称Boss网关 项目简介: 该平台提供对注册服务的API进行管控,运营平台首先创建租户,租户登录租户平台,可以注册应用及API、申请其他租户的API,经运营平台审核通过后,应用生成appKey与client_securet,API生成经过网关的访问URL。 调用平台API前,需要先应用的appKey与client_securet,调用OAuth2.0服务获取token。 之后POST方式,携带参数,请求API。 运营平台还提供路由管理、应用管理、日志监控、短信服务、邮件服务等;租户平台还提供服务调用信息查询、统计、应用日志查询等。 网关服务对租户的调用进行鉴权、限流。 责任描述: 基于SpringCloud(eureka,config,zuul,oauth2.0,ribbon,feign)开发微服务,涉及微服务有OAuth2.0、网关、运营平台、租户平台。 应用日志收集服务,使用Kafka接收日志消息,按日志日期、业务类型,进行水平分表,保存应用日志;在租户平台、运营平台提供应用日志查询功能。 发送短信服务、发送邮件服务均利用RabbitMQ队列。 微
教育经历
2008-09-01 - 2011-06-24兰州理工大学计算机软件与理论硕士已认证