个人介绍
熟练掌握python 异步编程,Tcp,Http,Websocket协议
熟练应用numpy,pandas,matplotlib,进行数据提取、清洗、数据可视化。
技术视频展示01:利用AST轻松搞定某点评滑块
熟悉各种反爬机制,JS逆向 , JS代码混淆,AST
熟练应用 aiohttp ,requests、xpath、正则re, 等模块
熟练使用Fiddler,Charles,Mitmproxy等各种抓包工具
熟练应用scrapy,熟悉分布式爬虫的基本架构和流程。
熟练应用HTML/CSS/Ajax JS/jQuery/Bootstrap等Web前端技术。
熟悉 Puppeteer ,Selenium ,NodeJS
熟悉mysql ,redis等数据库,非关系型数据库(mongodb)。
熟练使用Tornado,Django,nginx进行服务器后端开发。
熟悉linux命令和VIm命令,shell脚本编程,Git 的使用
工作经历
2018-07-19 -2020-01-01北京国研网Python Web爬虫工程师
前期主要使用 Python Tornado 进行Web后端开发,编写各种复杂数据的录入逻辑, 后期编写爬虫,爬取数据,并对数据进行去重,清洗,并录入数据库
2016-07-19 -2018-07-19加里敦科技高级后端工程师
使用PHP在猪八戒网上接单赚钱,主要做WEB后端开发,前端有时候也做
2015-07-19 -2016-07-19北京尚学堂科技高级后端工程师
使用java进行WEB后端开发工作
教育经历
2010-07-18 - 2014-07-18湖北理工学院计算机科学与技术本科
大学期间曾自学过C语言,汇编,数据结构