头发不掉
1月前来过
全职 · 300/日  ·  6525/月
工作时间: 工作日08:00-18:30、周末08:00-18:30工作地点: 远程
服务企业: 3家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

专业:大数据技术与应用

编程语言:Java,Python,Scala

框架:MapReduce,scrapy,spark

数据库:MySQL,mongodb,HBASE,SQLserver

大数据处理:Hadoop,Linux操作系统

数据获取:

熟练掌握网络爬虫,requests爬虫以及scrapy框架爬虫,会各种反扒技术

数据存储:

将获取到的数据存储到数据库

数据分析:

熟练使用numpy,pandas对数据进行分析处理

数据可视化:

使用matplotlib对数据进行可视化

工作经历

  • 2020-10-10 -至今四川化工职业技术学院学生

    学习hadoop大数据处理,scrapy爬虫,spark框架,数据库:mysql,MongoDB,sqlserver,hbase

教育经历

  • 2020-10-04 - 四川化工职业技术学院大数据技术与应用专科

     主修课程:Java程序设计、Linux操作系统应用、数据库技术及应用、spark框架 Python数据分析与应用、爬虫数据采集、Hadoop数据管理、Hbase及Hive技术

技能

自动化测试
0
1
2
3
4
5
0
1
2
3
4
5
作品
自动发送邮件

在有一份邮件要发送给多个人的时候,手工发送费时费力,利用*自动化即可自动的将需要发送的邮件发送给所有想发送的人,只需要将邮件内容·不管是文件还是文本,还有需要发送的**放在文件即可

0
2023-04-28 04:46
爬取所有股票的历史数据

股票的历史数据都有他的价值,可以通过股票的历史高开低收等数据,进行量化分析,首先用爬虫爬取所有股票的历史信息,用接口获取数据后,存入数据库,而后通过自己的量化分析策略进行量化分析

0
2023-04-28 04:48
自动化完成表格

因每周需要提交报表,人工审核提交耗时耗力,因此做了一个自动化查询完成青年大学习情况的记录,自动将完成情况生成表格,和可视化

0
2023-04-28 04:49
更新于: 2022-04-29 浏览: 108