大大大大大杉哥
1月前来过
全职 · 600/日  ·  13050/月
工作时间: 工作日8:00-19:00、周末8:00-19:00工作地点: 远程
服务企业: 0家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

个人目前无工作,可随时参与开发。

掌握语言:Java Go Python js

擅长领域:
Java后端、Python爬虫

技术栈:
Springboot+Vue+Bootstrap
Mysql Redis

爬虫:selenium scrapy tampermonkey

自觉学习能力强,如需其他技术也可以快速自学实现。

工作经历

  • 2017-08-01 -2017-10-01深圳彩易科思技术有限公司(北京分公司)实习生

    1.开发以urllib3为基础的Python爬虫项目 2.开发Okhttp3Redis为基础,Redia解耦的分布式多线程爬虫项目 3.开发以Springboot+Mysql的微服务架构Restful API数据接口 完成前后端对接

教育经历

  • 2013-09-01 - 2017-06-01北京工业大学信息与计算科学本科

    全系排名前十 班级排名第三 自觉学习能力强。在校参加校级社团活动 外出表演活得一等奖。

技能

作品
针对SolidWorks API的二次开发

为哈尔滨城林科技制作的一个工具箱项目。        主要完成两个功能:1.为工件导出BOM表。2.在员工审查BOM表中纰漏后,将更新的BOM表属性回导至SolidWorks文件中。

0
2023-02-27 05:29
Java OkHttp3配合Redis解耦实现的分布式多线程爬虫

一个针对中国体育彩票足彩、篮球赔率的爬虫。        该项目分为部分,downloader与processer,均为SpringBoot项目,并且两部分通过Redis解构,每一项都可以水平扩展。        Downloeader用于页面爬虫,并将数据推送至Redis。        Processer用于从Redis中提取数据并解析其结构,并随送至数据库。        由于该爬虫不需要大数据量,只是针对于实时数据的第一时间爬取,所以分布式只要用于高可用。

0
2023-02-27 05:30
基于TamperMonkey/Python Websocket的用户行为模拟爬虫

一个针对国家药品监督局的爬虫。 由于其用了瑞数公司的反爬产品,因此通过Js Hook插件TamperMonkey,完成浏览器段的用户行为模拟。即对于a、button、div标签的Click行为。再通过简单的js代码读取Dom数据并在浏览器段用WebSocket对本机另一个Python服务器段项目进行全双工连接。 Python’项目记录浏览器发来的数据,并保存为csv格式或是进库。并通过WebSocket对浏览器进行通信控制。即告诉浏览器下一步进行哪一种用户行为。

0
2021-10-17 09:30
更新于: 2021-10-17 浏览: 183