1970-01-01 -至今科悦智能设备技术（深圳）有限公司全栈工程师

数据抓取 NW-Spider 2024.02 ~ 2024.04 后端工程师 项目描述：数据抓取项目NW-Spider主要负责从中国药监局爬取相关医疗企业和产品信息，编写爬虫程序以获取并处理这些 信息。项目涉及多种反爬技术应对和数据处理方案。 职责和贡献： 1. HTTP/HTTPS请求处理： 使用Python的requests标准库处理HTTP/HTTPS请求，从中国药监局网站爬取医疗企业和产品信息。 2. HTML数据解析： 使用BeautifulSoup库解析HTML网页数据，提取所需的企业和产品信息，确保数据的准确性和完整 3. 数据处理与存储： 使用openpyxl库处理Office Open XML格式的Excel文件，对爬取的数据进行整理和存储，方便后续的数据分析和处理。 4. 反爬技术应对： 解决瑞数反爬技术、动态图片滑动验证和验证码验证等反爬方案。 使用Selenium和ChromeDriver模拟用户滑动图片验证，通过Tesseract OCR、pillow（PIL）、pytesseract和opencvpython处理验证码识别。 针对瑞数反爬技术，尝试多种方

2018-06-01 - 2021-06-08湖南生物机电职业技术学院java专科

姓名：刘文强 年龄：25 工作年限：3年 籍贯：湖南郴州