大数据工程师深圳
全职 · 500/日 · 10875/月信用正常
工作时间: 工作日19:00-22:00、周末09:00-22:00工作地点:
服务企业:
15家累计提交:
0工时
联系方式:
********
********
********
查看联系方式
聊一聊个人介绍
主要接python程序开发,数据处理脚本开发,爬虫脚本开发。
requests、Selenium、scrapy、xpath、BeautifulSoup、re、numpy、pandas、MySQL、sqlserver、MongoDB、SQLite
工作经历
和TA聊聊APP扫码和程序员直接沟通
该用户选择隐藏工作经历信息,如需查看详细信息,可点击右上角“和TA聊一聊”查看
教育经历
和TA聊聊APP扫码和程序员直接沟通
该用户选择隐藏教育经历信息,如需查看详细信息,可点击右上角“和TA聊一聊”查看
技能
0
1
2
3
4
5
作品
提取各能源消耗源数据kettle进行数据清洗,8个数据源,有3种不同数据库类型(不能用python做数据处理增加很多工作量) 定时任务python airflow,多个数据清洗要分时定时做自动化调度,日/周/月任务 finereport做报表数据展示,报表类型多样,功能对应于定时任务所获取到的数据
0
2023-04-18 21:13
该项目的难点在于数据杂乱,数据清洗的结果会直接导致数据准确性,采用numpy、pandas提取数据 门禁为刷卡数据,机器感应问题导致数据重复,短期多次进出数据重复(分为单人频繁进出和单卡复刷),进出异常等 pyecharts、matplotlib做多个数据可视化展示
0
2023-04-18 21:15