禁赌毒
1月前来过
全职 · 300/日  ·  6525/月
工作时间: 工作日10:30-21:30、周末10:00-21:30工作地点: 远程
服务企业: 14家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

1、从事爬虫工作已有5年多时间

2、可以解决部分网页的js混淆、数据加密、签名算法、js二次加密、token认证等

3、熟练运用re、xpath提取页面信息

4、掌握数据库mongodb增删改查的日常操作

5、掌握scrapy框架的运用

6、使用selenium爬取数据动态页面数据

7、可以解决大部分网页get、post请求(包括带cookie)

8、具有独自编写爬虫代码、提取页面信息和数据清洗的能力

9、可以提取较多数据(万级)

10、爬取过某团、某潮资讯、某筑市场服务平台等

工作经历

  • 2017-07-13 -至今某金融资讯机构爬虫采集工程师

    1、实时新闻资讯的爬取, 2、股票信息和上市公司信息的爬取, 3、建筑类信息及资质等的爬取, 4、创投机构、投资案例、拟投项目等爬取。

教育经历

  • 2007-09-01 - 2011-06-30南京航空航天大学计算机科学与技术学院本科

    在校主要学习Java,C#,C/C++等

技能

MongoDB
爬虫
0
1
2
3
4
5
0
1
2
3
4
5
作品
爬取某团美食

某团美食数据爬取,包含店名、地址、人均、评分、价格等,并写入数据库mongodb,数据可用作数据分析,反爬措施为js逆向。

0
2023-04-25 02:54
爬取创投机构数据

爬取最新创投机构数据,并写入数据库mongodb,爬取数据可用作数据分析,其反爬措施为JS逆向,解决反爬后通过整场请求得到数据。

0
2023-04-25 02:56
建筑市场

爬取建筑工程企业信息并写入数据库mongodb,包含名称、资质、法人等,可用作数据分析。其反爬措施为JS加密。解决反爬措施后,通过requests模块请求到数据。

0
2023-04-25 03:01
更新于: 2022-07-12 浏览: 398