0
1
2
3
4
5
2天前在线
数据分析
南昌全职 · 300/日 · 6525/月信用一般
工作时间: 工作日08:00-07:00、周末08:00-07:00工作地点:
远程
服务企业:
0家累计提交:
0工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
我是程序员客栈的 耳语，一名数据工程师；
我毕业与 南昌工学院，
负责过 图书网站数据抓取，视频网站数据抓取
熟练使用 python，网络爬虫，json
如果我能帮上您的忙，请点击“立即预约”或“发布需求”
工作经历
2023-06-06 -2024-06-09猪八戒数据分析
对从网页中提取的数据进行处理和清洗，通常使用数据处理库（如Pandas）进行数据分析或者使用正则表达式（re模块）进行信息提取。 将处理后的数据存储到数据库（如MySQL、MongoDB）或者文件（如JSON、CSV）中，用于后续分析或展示。 对爬取的数据进行清洗、去重、格式化等操作，使其适合进一步的数据分析和处理。 使用分布式框架（如Scrapy-Redis）进行分布式爬取，提高爬取效率和速度，同时减轻单个服务器的负载。
教育经历
2023-06-09 - 南昌工学院大数据科学与大数据技术本科
技能
作品
网络爬虫的主要功能有：获取网页内容，解析网页内容，提取所需信息，正则表达式模块，用于提取网页中的特定信息处理JSON数据格式。 可以处理使用者对网站数据信息的获取和存储格式，可添加具体要抓取数据的长短和数据查询
02024-06-30 13:14
下载次数：0
￥300
