大道三千行
1月前来过
全职 · 1000/日  ·  21750/月
工作时间: 工作日18:30-22:00、周末11:00-17:00工作地点: 远程
服务企业: 14家累计提交: 2工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

从事过传统软件开发、C++技术支持、Andoird APP维护等,目前从事数据采集的工作,数据采集的功底扎实,有丰富的互联网数据采集经验。专业技能方面:熟练使用redis、mysql、mongodb、kafka等,爬虫框架及分布式方面有这非常丰富的使用经验,熟练应用解析库lxml、pyquery等,在逆向方面亦有经验。

工作经历

  • 2020-04-01 -至今高级爬虫

    主要职责是舆情及情报方面的实时采集,开源数据有微博、央视新闻、门户网站、论坛如CSDN、看雪论坛等,闭源数据有抖音、小红书、快手等

教育经历

  • 2009-09-16 - 2013-07-01皖西学院计算机科学与技术本科

    除正常完成所学专业课学习外,大学期间自学了C++语言,并且毕业之初从事的也是C++相关的开发工作。

技能

C
C++
Kafka
多进程
MySQL
MongoDB
0
1
2
3
4
5
0
1
2
3
4
5
作品
Razer舆情系统

实时采集Razer相关的帖子及评论消息(数据源涵盖了twitter、YouTube、instagram、Insider等外网数据源)。以便客户实时了解产品相关的舆情信息。

0
2021-06-09 18:24
QQ群消息实时采集

实现*群消息的实时采集,有效信息的正则提取,以便其他策略部门基于此制定相应的策略,达到实现拦截非法薅羊毛的目的,项目上线以来,日均拦截率基本是100%。

0
2021-06-09 18:19
舆情情报系统

7*24小时不间断采集新闻、报刊、政务、微博、公众号、博客、论坛、视频、网站、客户端等全网信息来源,以帮助企业对社会热点话题、突发事件的快速发现、及时应对和正面引导

0
2021-06-09 18:03
更新于: 2021-06-09 浏览: 335