耳语12138
1月前来过
全职 · 300/日  ·  6525/月
工作时间: 工作日08:00-07:00、周末08:00-07:00工作地点: 远程
服务企业: 0家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

我是程序员客栈的 耳语,一名数据工程师;

我毕业与 南昌工学院,

负责过 图书网站数据抓取,视频网站数据抓取

熟练使用 python,网络爬虫,json

如果我能帮上您的忙,请点击“立即预约”或“发布需求”

工作经历

  • 2023-06-06 -2024-06-09猪八戒数据分析

    对从网页中提取的数据进行处理和清洗,通常使用数据处理库(如Pandas)进行数据分析或者使用正则表达式(re模块)进行信息提取。 将处理后的数据存储到数据库(如MySQL、MongoDB)或者文件(如JSON、CSV)中,用于后续分析或展示。 对爬取的数据进行清洗、去重、格式化等操作,使其适合进一步的数据分析和处理。 使用分布式框架(如Scrapy-Redis)进行分布式爬取,提高爬取效率和速度,同时减轻单个服务器的负载。

教育经历

  • 2023-06-09 - 南昌工学院大数据科学与大数据技术本科已认证

技能

0
1
2
3
4
5
作品
网站数据抓取

网络爬虫的主要功能有:获取网页内容,解析网页内容,提取所需信息,正则表达式模块,用于提取网页中的特定信息处理JSON数据格式。 可以处理使用者对网站数据信息的获取和存储格式,可添加具体要抓取数据的长短和数据查询

0
2024-07-09 17:02
下载次数:0
¥300
更新于: 06-30 浏览: 93