个人介绍
武汉理工大学 计算机科学与技术专业毕业
十年以上开发经验、资深开发骨干,有丰富架构能力,负责公司平台的架构和技术方案。曾在多个大厂有工作经验。
有丰富的数据全流程的治理经验,包括数据的ETL、数据建模,数据质量,计算性能优化。
拥有大数据开台开发经验,包含olap多维分析工具,指标平台,数据标注平台。数据质量监控体系。
熟练掌握Java、Python,vue、typeScript 编程语言,拥有全栈开发能力,能够独立开发中小型应用系统。
工作经历
2022-03-01 -2024-04-01知名航天企业高级后端工程师
1、负责 大数据平台的整体架构设计,包括数据接入、应用需求对接和系统功能完整性与扩展性的保障。设计数据存储和处理架构,以满足大数据量的高效处理和分析。 2、主导 GIS 标注平台的开发与设计,与 AI 算法团队紧密合作,对接数据以确保系统符合使用需求。优化标注流程提高标注效率和质量。 3、参与业务系统前后端的开发工作,负责技术架构的设计和完善。优化系统性能,提升用户体验。 4、负责大模型的应用调研,分析可行性并确保整个系统功能与业务需求相契合。研究前沿技术,为系统的创新发展提供建议。
2019-04-01 -2021-10-01新浪高级后端工程师
1、负责为整个分析团队开发数据查询系统的后端。设计和实现高效的数据查询算法和架构,提高系统的查询性能和响应速度。 2、参与 OLAP 多维分析系统的后端开发,使用户能够通过简单操作进行快速灵活的大数据查询。优化数据存储和索引结构,提升查询效率。 3、负责数据仓库的建设,包括数据落表、数据模型开发和执行性能优化。设计合理的数据架构,确保数据的高效存储和查询。 4、建立和完善数据监控体系,及时发现数据计算过程中的问题。设置告警机制,提前预警潜在的数据异常情况。 5、参与数据中台服务的建设,集成了调度平台,元数据管理、指标定义。
2018-06-07 -2019-04-01滴滳出行资深数据开发
1、负责小桔充电数据仓库的日常维护,包括数据的更新、备份和恢复。通过优化数据存储结构和查询 算法,提高了数据仓库的性能和响应速度。 2、参与设计和优化数据爬虫系统,提高数据采集的效率和质量。通过重构爬虫逻辑和增加数据处理环节, 确保采集到的数据准确无误。 3、负责与外部系统的数据接口开发和维护工作,确保数据的安全传输和高效交互。及时解决接口故 障和数据传输问题,保证系统的稳定运行。 4、建立数据质量的监控体系,设置数据指标和告警机制。定期进行数据清洗和验证,确保数据的 完整性和准确性。
2016-04-01 -2018-07-01贝壳找房(北京)科技有限公司数据开发
1、负责线上数据相关系统的日常维护、优化和升级工作。解决系统故障,提升系统的稳定性和性能。 2、制定数据仓库的架构方案,包括 任务的调度,ETL流程和各个数据层的规范。确保数据的高效采集和存储。 3、建立数据质量监控体系,关注关键指标的波动情况,及时发出预警通知。进行数据清洗和纠正,提高数据的准确性和可靠性。 4、分析和优化相关任务的执行效率,通过案例分析找到瓶颈并提出解决方案,减少任务执行时间。 5、制定预防措施和应急预案,快速响应和处理各种异常和突发的系统故障,保障系统的正常运行。 6、进行 OLAP 查询引擎的调研,评估不同解决方案的优缺点,并根据业务需求选择合适的查询引擎
2014-11-01 -2016-03-01京东全栈开发工程师
1、负责京东罗盘系统的架构升级工作,解决系统运行中出现的问题。优化系统性能,提高系统的稳定性和可扩展性。 2、基于数据集市进行业务数据建模,制定数据规范和标准。确保数据的一致性和准确性,为数据分析提供良好的基础。 3、 进行可行性方案的技术调研,分析不同方案的优缺点,并与团队分享研究成果。为项目决策提供有力支持。 4、参与指标可视化系统的开发,运用 Saiku 解决即席查询(Ad Hoc)需求。提供直观的数据展示和便捷的查询功能
2010-05-01 -2014-11-01诺基亚西门子通信技术全栈开发工程师
1、负责北京移动公司综合性能分析系统的开发,专注于分析诺西通信设备终端的流量数据。通过数据分析提供洞察力,优化设备性能。 2、主导北京移动即席查询系统的开发,解决自定义多维查询的需求。设计和实现灵活的数据查询接口,提升用户查询效率。 3、参与河南移动公司 OMC 数据分析系统的开发工作。规划系统设计方案,跟踪项目进度,及时解决团队成员在设计过程中遇到的问题。 4、 数据中心仓库模型设计 数 :负责设计系统的数据中心仓库模型,确保数据的高效存储、管理和检索。优化数据结构,提高数据分析的效率和准确性。
教育经历
2006-09-01 - 2010-07-01武汉理工大学计算机科学与技术本科
专业基础课程成绩优异,有非常好的实践能力
技能
提取遥感图像地物信息数据,结合业务需求生成分析报告,应用场景包括保险行业,农业,建筑业 主要技术利用实例分割算法提取卫星图片地物信息生成可用的分析数据,我负责整个平台的开发建设运维,包含数据管理,项目管理,算法服务 用到的技术包含springboot,mysql,geoserver,pytorch,vue3
该项目旨在构建一个灵活、高效的数据分析系统,以解决分析师团队面临的大量数据业务需求。该系统允许分析师通过页面直观地选择业务模型、维度和指标,进行二次计算和可视化展示,从而极大地提升了工作效率。系统后端设计兼容多种数据源计算引擎,如MySQL、Presto、ClickHouse和Druid,确保了广泛的数据接入能力和强大的计算性能。