个人介绍
自由工作状态中,有时间且有能力完成python爬虫等项目。平时喜欢看看论坛,写自己感兴趣的程序,代码。
熟练掌握python语言,深入理解其面向对象思想,掌握其线程、协程、装饰器等用法。
熟练使用html、css、js、jq、bootstrap、ajax等前端技术进行web开发。
熟练掌握mysql、sqllite数据库的使用,掌握sql优化、索引、事务控制等特点。
熟练掌握django框架的使用,理解其基于MVC设计思想的MTV模式,掌握其中间件。
熟练掌握Linux日常工作环境,熟练掌握常用命令。
熟练掌握redis的基本命令和数据类型,两种持久化机制 RDB 和 AOF。
熟练使用MongoDB完成日常任务的开发。
熟练使用Echarts、富文本编辑器等工具。
熟练掌握使用爬虫基本库requests、urllib、Scrapy并熟练掌握Scrapy各组件作用以及运行流程。
熟练掌握scrapy的基本架构以及异步框架的使用,使用scrapy-redis做高效率爬虫。
参与过分布式爬虫的设计,对aiohttp异步爬虫框架做过封装。
熟练掌握常见的反爬机制,如滑块验证码、js加密、ip代理池、动态cookies等。
熟练掌握APP的采集与抓包工具和selenium 无界面浏览器的使用。
熟悉协同开发工具git的相关操作。
熟悉短信发送,jqGrid,html,css,js,jQuery,ajax。
工作经历
2019-08-01 -2020-02-01深圳前海黑顿科技有限公司后端开发工程师
1、参与产品的需求分析与设计。 2、共同完成产品后端开发,并提供接口文档。 3、根据需求完成模块设计、测试工作。 4、完成后台部分文档的编写工作。 5、参与数据库的优化更新。 6、协调各模块的开发进展。
教育经历
2016-09-01 - 2020-07-01南阳理工学院电子科学与技术本科
主要: python后端开发,爬虫