个人介绍
爬虫工作经验两年,熟练掌握urllib、requests、selenium等爬虫模块***数据抓取;熟悉 re、xpath、selector 等网页数据提取手段;熟练使用多线程、多进程编程;能够解决常规 js 逆向加密;构建过 cookie 池,构建过代理 ip 池;能够处理常规图片滑块,数字、文字验证码等反爬手段;了解 Linux 系统及其命令操作。
思维发散,思路清晰,乐于学习新知识,保持不断学习、不断创造价值的状态 良好的沟通能力,能很快适应工作,熟悉业务,融入到团队中,工作认真负责,踏实肯干 积极主动的工作态度,乐观向上的价值观,具备良好的团队开发意识 能按时在规定时间内完成公司交代的相关任务,良好的工作抗压能力。
工作经历
2021-07-01 -2022-03-01龙绚数据运营有限公司数据工程师
1.负责各大省份数据运营,维护爬虫服务正常运作。 2.参与项目,完成负责的模块开发。 3.对加密网站进行js逆向,利用execjs、或python还原的方式获取加密参数。 4.小程序端数据抓取。 5.内部使用的小工具的开发。
2021-06-16 -至今成都矿浮科技有限公司爬虫工程师
1.负责各大网站数据运营,维护爬虫服务正常运作。 2.参与项目,完成负责的模块开发。 3.对加密网站进行js逆向,利用execjs、或python还原的方式获取加密参数。 4.小程序端数据抓取。
2019-10-15 -2021-06-15绵阳奇安信科技有限公司爬虫工程师
1、根据产品经理提交的项目需求,抓取各大网站的信息; 2、对待抓取的网页进行分析,网页信息提取等技术开发; 3、对抓取的内容进行提取、处理、优化、去重、入库等操作; 4、优化抓取效率,提升爬虫的抓取效果; 5、对数据进行存储; 6、后期的代码维护。
教育经历
2016-09-01 - 2020-06-15成都东软学院计算机科学与技术本科
专业是计算机科学与技术系-信息安全方向,在校期间学习python爬虫相关知识,大三在公司实习爬虫岗位。