个人介绍
熟悉springBoot,springCloud,springMVC,spring,myBaits
熟悉MySQL,mongodb
熟悉Redis
熟悉Linux
熟悉RPC,MQ
熟悉php,python语言开发
数据抓取
java基础扎实,了解内存管理机制,分布式锁机制
使用python,可视化数据生成,地图热力图生成,差值算法等
管理过团队,搭建微服务框架
工作经历
2020-12-01 -2023-11-23北京瑞蒙特科技有限公司技术总监
1)负责项目的整体规划及任务调度 2)负责项目框架搭建 3)负责后端开发、数据库设计、服务器的维护、爬虫、数据可视化、大数据同化 4)硬件产品的数据对接 5)定制需求的沟通及调整 6)气象模型的搭建 7)环境算法的编写
2018-05-01 -2018-10-31北京蚁众科技JAVA
1)负责后端程序开发,与前端对接 2)项目文档,及接口的描写 3)独立完成 web 项目 4)项目的维护 5)完成产品经理对项目的要求并进行修改
2017-03-01 -2018-05-31北京精厚贸易科技有限公司项目经理
1)项目商讨 2)数据库搭建,后台代码的功能实现,测试修改 BUG ,编写技术文档 3)通过爬虫进行数据价格统计分析 4)处理分析高并发情况下系统稳定情况
2015-10-01 -2016-08-01北京美联软通科技有限公司Java开发
1)各大运营商与我们平台系统的对接。 2)独立开发公司内部的核算系统 3)帮助用户对接平台
教育经历
2015-05-01 - 2017-10-17石家庄职业技术学院计算机专科
。。。。。。。。。。。。。。。。。。。
技能
项目描述 ● 以爬虫,接口,硬件设备收集数据并对数据进行可视化展示。其主要项目模块如下: ● 爬虫模块,对公开网页,app ,数据登录网站,接口,相关环境气象数据进行抓取接入。 ● 集成工控机模块,硬件设备通过本地485接口线,接入到集成器中,并对数据进行同化质控,对设备进行反向控制,对设备信息的报警,入到本地数据库,对数据三维地图立体进行实时展示 ● 云端数据传输模块,硬件设备数据通过 mqtt 传输,云端接入并实时入库,进行展示 ● 无人车模块,通过云端对无人车及设备进行到反向控制,与无人车数据的同化接入 ● 数据同化模块,将所有数据通过算法进行同化质控,达到可使用的标准 ● 数据可视化模块,对同化后的数据,通过模型进行可视化输出,达到二维及三维展示效果 ● 预测模块,对数据通过 WRF,CMAQ 等模式对空气质量进行预测 ● 三维展示模块,将数据应用到三维地图上 人员配置 ● 前端:2人 ● 后端:4人 ● 硬件:2人 ● 地图:2人 ● UI:1人 主要负责 ● 团队项目管理 ● 项目架构 ● 数据抓取,对 app ,登录网站,攻克登录的加密方式及各种验证码的处理。通过线程池与代理池加快数据抓取速度,以每小时万级的数据量控制在三分钟左右入库完成 ● 硬件数据接入,每两秒一组的采集数据图片处理不过来,用两个线程,做一个环形缓存,一个负责接收,一个负责环形处理。并且先进行数据接收,再处理图片,保证此线程不做任何任务切换,接收完在释放 ● 数据库的读写分离及分库分表,减轻单表数据量的压力 ● 数据同化,将各类数据利用多线程进行质控并根据需求处理为可用数据 ● python 进行数据可视化 ● 气象模型的搭建接入服务 (WRF)
1、项目需求 微站、微波、惯导设备数据移动采集实时上传到云端数据库,并可以通过任务查看历史。 三维地图与小程序可以实时查看设备采集数据所绘制的走行墙,及位置。 数据通过环境算法进行多通道亮温质控,观测遮挡质控,坡度质控并生成相应可视化图。 数据生成时空演变图,计算热力条件可靠性,垂直廓线可靠性 2、项目产品 1)微站、微波、惯导设备 2)云端服务器,数据库,mqtt ,接口服务,vue,GIS 3)质控算法,可靠性算法,时空演变图的绘制 3、主要负责 1)数据库的搭建及维护 2)mqtt 的创建,微站设备通过物联网直接上传到线上库 3)微波设备形成本地文件,实时对十六进制文件进行解析并上传到 mqtt 与云端数据库,本地数据库 4)根据设备断链状态形成任务条,并于数据表关联 5)python 对数据进行质控,可靠性与时空演变图的绘制,并根据条件进行绘制,最终将图片上传到阿里云的 oss 6)图片下载及导出功能 7)服务器的环境部署及运行
1、项目需求 三维风速计,环境监测设备放到移动设备中,路上行驶时监控200米范围内的污染工厂排放,通过算法计算出污染风向与烟雨图。 并将走行墙,污染信息,工厂位置,污染风向与烟雨图展示在三维地图上,能够通过历史和实时查看。数据结果入库并上传到云端 定点模式则将设备固定一个地点,长时间对该地点数据进行监测,并绘制这段时间的烟雨图 2、技术产品 1)三维风速计、环境监测设备 2)双系统工控机,路由器 3)vue,GIS,RabbitMq,python,java 4)烟羽算法及绘制 3、主要负责 1)三维风速计、环境监测设备通过485端口本地采集及入库,数据实时推送的 RabbitMQ 中并建立确认接收机制保持数据的稳定性 2)高斯模型算法的编写,对数据进行演算,计算出排放率、污染等级、实际风向、距离及分子量 3)通过排放率、环境值、风向、污染等级进行烟雨图绘制 4)对烟雨图的数据与网格通过三角函数计算出实际经纬度值,用于 GIS 方便对数据在地图上绘制 5)结果数据通过 RabbitMQ 实时上传到本地和云端
相似推荐 换一批
员工
500元/天
烟台南山集团
技能:HTML5,CSS,JavaScript,Vue,jQuery,axios,Ajax,ElementUI,Java
研发工程师
700元/天
前阿里巴巴
技能:Java,PHP,RocketMQ,Nginx,Kafka,ElasticSearch,架构,HTML5,Vue,MySQL
CTO
1200元/天
广西迈特优科技发展有限公司
技能:HTML5,CSS,JavaScript,jQuery,Node.js,electron,PHP,Java,Python,Nginx,Docker,SpringMVC,Redis,Rust,Flutter,UI,系统架构,渗透测试,MySQL
项目经理+全栈工程师
500元/天
指尖工作室
技能:PHP,Java,jQuery,JavaScript,Kotlin,Flutter,Ajax,CSS,HTML5