blackjack.
4天前在线
全职 · 300/日  ·  6525/月
工作时间: 工作日20:00-23:00、周末9:00-23:00工作地点: 远程
服务企业: 8家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

1、掌握python基础知识,熟练使用re、xpath、bs4解析包

2、掌握requests和scrapy框架的使用

3、掌握selenium的基本使用,能应用于自动化测试和爬虫

4、掌握django、flask框架应用,能构建网站和后端接口等

5、掌握mysql、mongodb数据库增改删查操作

6、掌握多线程、分布式的部署运行


爬取项目有:

贝壳、58同城、安居客、豆瓣小组等房租售平台

国内及境外大型电商平台如淘宝、京东、亚马逊、速卖通等

国家网例如土地网、天气实时质量、疫情数据等等

大众点评、豆瓣以及品牌官网爬取例如nike、阿迪、奶茶品牌、奢侈品品牌等等

工作经历 和TA聊聊

APP扫码和程序员直接沟通

  • 该用户选择隐藏工作经历信息,如需查看详细信息,可点击右上角“和TA聊一聊”查看

教育经历

  • 2017-09-01 - 2021-07-01华南理工大学广州学院计算机科学与技术本科

    在校期间在学校工作室学习爬虫与前端知识,有完成相关爬虫练习 实习期间完成爬虫工作

技能

Django
MySQL
Mongo
多线程
MongoDB
爬虫
0
1
2
3
4
5
0
1
2
3
4
5
作品
亚马逊电影榜单

在校做的练习,爬取电影信息,标题、图片、链接、影评等等 其余类似豆瓣电影榜单、豆瓣小组租房信息、豆瓣影评啥的都有爬取过 猫眼电影对应的这些信息也有爬取过

0
2023-04-29 12:59
58同城

58同城全国数据,包括新房、二手房、商铺的租售等信息 爬取完成后对应完成清洗,入库到mongodb数据库 维护了IP池,节省IP消耗量

0
2023-04-29 13:00
大众点评

1、通过搜索入口,解决字体反爬、ip反爬等问题,爬取特定品牌的全国门店数据,地址、评分、评论、商品、标签、图片等等 2、api爬取全国商城以及该商城下的所有门店的详细数据 3、按特定清洗规则,清洗所有爬取到的数据并存入mongodb 4、部署爬虫,完成定时爬取及相关监测

0
2023-04-29 13:03
更新于: 2022-05-16 浏览: 149