数据采集员
1月前来过
全职 · 300/日  ·  6525/月
工作时间: 工作日8:00-20:00、周末8:00-20:30工作地点: 远程
服务企业: 0家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

熟练python爬虫技术,对爬虫技术感兴趣,熟练使用各种爬虫库,数据库,数据采集,数据分析,数据清洗。熟练分布式爬虫,多线程爬虫,js逆向等

学习java,python,爱好编程。毕业于江西软件职业技术大学。可一个人独立完成增删改查项目,从前端到后端到数据库独立开发和设计。熟练使用linux操作系统,springboot框架,springcloud相关组件。熟练使用redis数据库,搭建redis集群。熟练使用docker进行项目部署。对面向对象编程有充分的了解。

工作经历

  • 2024-03-01 -至今深圳慰来科技爬虫工程师

    使用分布式爬虫爬取各大电商平台数据,输出json文件或表格。优化爬虫程序,设计爬虫方案。js逆向技术,绕过反爬机制。熟练使用各种爬虫库,requests,selenium, splash,以及scrapy框架,熟练分布式爬虫scrapy_redis,多线程爬虫技术,熟练关系型数据库mysql, 以及非关系型数据库mongodb和redis,熟练使用linux操作系统,docker容器等

  • 2022-07-01 -2023-07-01福建星汉信息科技有限公司java

    1. 学习和使用常见的Java开发框架和工具,如Spring、Hibernate、Maven等; 2. 参与代码审查和测试,确保代码的质量和可靠性; 3. 学习和遵守公司的开发标准和最佳实践; 4. 解决日常开发中的问题和故障,并与团队成员合作解决更复杂的问题; 5. 学习和使用版本控制工具,如Git

教育经历

  • 2020-09-01 - 2023-06-01江西软件职业技术大学软件技术专科

    专业成绩各科均优秀,曾帮助同学完成老师交代的项目及诸多bug。

技能

Vue
Spring
Mybatis
Redis
CSS
jQuery
爬虫
0
1
2
3
4
5
0
1
2
3
4
5
作品
百度AI

该系统分为图像技术模块、⼈脸与⼈体检测模块、语⾳技术模块和⾃然语⾔模 块,在百度AI开放平台中阅读相关⽂档,调⽤远程Api实现了⽂字识别、⾝份证识别、动物识别、⼈物动漫画、⿊⽩上⾊、⼈脸对⽐及⼈脸检测、语⾔合成及语⾔识别、地址识别及情感分析等功能。

0
2023-11-05 23:25
酒店管理系统

该系统包括管理员,医⽣,护⼠三⼤模块。每个模块都是⼀个⼦项⽬,它们互不影响,独⽴运⾏。将每个服务都注册进Eureka服务注册中⼼。使⽤Openfeign技术实现模块之间的服务调⽤。为了实现模块之间的数据共享问题,这边使⽤了 redis数据库去完成,最终实现了系统中的个⼈信息功能,药品查询功能,药品发放功能,添加体征数据等⼀系列功能。

0
2023-11-05 23:16
医院管理系统

该系统使用微服务进行开发,包括管理员,医生,护士三大模块。每个模块都注册eureka服务注册中心。使用openfeign技术实现模块之间的服务调用。为了实现模块之间的数据共享问题,这边使用了redis数据库去完成。最终实现了系统中的个人信息,药品查询,药品发放等一系列功能。

0
2023-11-05 23:11
更新于: 08-10 浏览: 224