个人介绍
在大学期间自学多门编程语言并熟悉掌握了计算机基础知识与数据结构与算法,同时考取了软件设计师的中级职称
资格。曾经在校期间参与杭州沙景科技有限公司的开发工作,主要担任爬虫、协议数据分析以及前后端开发,有较
强的组织沟通能力,喜欢迎接新的挑战。学习能力很强,能够快速胜任不同领域的工作。本人性格沉稳,正直忠
诚、执行力强;对工作乐观执着,敢于面对困难与挑战。
工作经历
2019-12-01 -2020-07-01杭州沙景科技有限公司python后端爬虫
负责设计开发网络爬虫以及逆向分析js文件,进行多平台信息抓取和分析工作; • 根据业务需求通过抓包软件Fiddler、实现代理、selenium、逆向js文件、多线程爬虫等工作; • 根据业务需求获取各大平台cookies实现模拟登录和模拟请求接口获取数据; • 根据业务需求,实现大规模文本、图片数据抓取、清洗、存储等工作。
教育经历
2017-09-17 - 2021-07-01广东科技学院电气工程及其自动化本科
C语言程序设计、MATLAB程序设计与应用、单片机原理以接口技术、嵌入式开发、电气控制与PLC、传感器与检测技 术、自动控制原理、数字电子技术、模拟电子技术基础、运动控制系统
技能
责任描述: • 编写爬虫程序,想出反反爬虫策略,数据清洗,分表储存; • 编写django后台数据管理系统、部分前端使用vue框架,与使用者进行交互; • 部署至centos服务器; • 持续做程序的维护与服务器的运维工作。 项目简介: 1. 分析携程平台与美团平台的数据包,模拟请求接口获取价格。 2. 分析同舟平台的api接口,模拟请求接口完成上传价格、获取房态等功能。 3. 完成携程价格与美团外网价格的抓取将价格进行对比,处理后将价格录入到同舟后台的功能; 4. 操作语言:python、框架:django+vue、数据库:mysql、开发平台:visual studio code
责任描述: • 编写爬虫程序,想出反反爬虫策略,数据清洗,分表储存; • 基于django-suit框架编写django后台,与使用者进行交互; • 部署至centos服务器; • 持续做程序的维护与服务器的运维工作。 项目简介: 1. 根据需要爬虫的数据进行需求分析,分析洲际集团官网api结构与反爬机制; 2. 通过requests,xpath以及正则表达式,完成获取房态数据的抓取、批量订房、取消预定号、等功能; 3. 对抓取数据进行清洗过滤,分表储存; 4. 操作语言:python、框架:django+djangosuit、数据库:mysql、开发平台:visual studio code