网络爬虫

1. 在线教育平台 2. 包含组织，老师，学生等端 3. 可以发布课程，学习课程，以及在线学习等功能 4. 前后端都有，都由个人开发

在这个示例中，首先我们使用requests库发起了对指定网址的请求，并检查响应状态码是否为200（表示请求成功）。然后，我们使用BeautifulSoup库解析页面内容，并从中提取所需的数据（这里示例提取了所有标题元素）。最后，我们打印这些标题元素的文本内容。 请注意，实际的网页结构和所需的数据会因网站而异，你可能需要根据具体网站的HTML结构和数据位置来调整代码。另外，确保你了解网站的使用规定和法律法规，遵守网站的爬虫规则，避免侵犯他人的数据和隐私。

运维，安全评估，爬虫，代码 .

项目主要分为三个大方面，函数，面向对象，前端，MySQL或者splite数据库，django后端开发，运用HTML跟css实现网页样式，利用js进行页面的动态渲染，以及链接进行页面跳转，文章相关推荐功能，分页功能，时间模块，评论功能等等都已实现，利用ajak实现前后端数据的交互，最后完成个人技术网站。

post请求参数分析，需要解密2重签名嵌套逻辑，反向根据webpack模式找到签名生成模块，并重写更改，拿到2重签名套入参数

老板有什么需求就做什么 由于做爬虫蹲号子一个月 目前无业家里蹲 随时可接项目 不挑项目、不挑时薪 先做后付款 ^_^ 3年以上工作经验 主做web后端，爬虫，数据分析 业余写过自己的股票，债券量化回策

慧眼安全检测平台是基于行业化合规的主动安全管理产品。可作为行业监管部门的监督检查工具，快速摸排资产、精准定位风险隐患，及时响应通报并推动整改；可作为行业化关键信息基础设施的管理和监控平台，结合安全事件，帮助用户进行资产梳理，评估漏洞影响，快速处置，形成安全管理闭环。 我负责检测引擎开发

我主要是掌握c++、php、java、go、D等编程实现能力； 也可以兼容行业市场调研，深度机器学习 算法设计能力及可以实现实际应用项目关键算法

本项目将使用Python Django框架开发一个微博情感分析平台，该平台将具有以下主要功能： 用户注册与登录：用户可以通过注册账号并登录进入平台，从而使用情感分析功能。 文本采集：平台将提供微博文本采集功能，允许用户输入微博链接或关键词，然后从微博平台上采集相关文本数据。 情感分析：平台将使用自然语言处理技术和情感分析算法，对采集到的文本进行情感分析，并显示分析结果，包括情感倾向（积极、消极）以及情感程度。 可视化展示：情感分析结果将以图表和统计数据的形式进行可视化展示，帮助用户更直观地了解情感信息。

1、帮助客户完成京东、天猫等平台不同商品评论数据自动抓取（包括图片信息）； 2、搭建的RPA机器人能每天自动化完成评论数据抓取任务；

当前系统能力： 数据源：贝壳网页版 数据展示方式：飞书通知、生成excel、命令行展示 规则配置：按照不同用户配置监控房源、配置房源黑名单 监控触发方式：手动触发、job触发

熟练运用python中的reques模块，re模块，bs4模块，os模块，以及爬虫外的scoket，pil等其他模块，目前对爬虫有一些独特见解 项目的主要作用是可以帮助客户得到一些自己需要的数据，并且可以对数据进行一个规划的处理。

资产管理系统是一种**以实物管理为核心，利用计算机为操作平台，通过条形码等先进技术实现对固定资产全生命周期的监管和管理的系统**。 具体来说，资产管理系统的主要功能和特点包括： 1. **资产跟踪**：系统可以对资产从采购、入库、出库、调拨、借用到报废的全过程进行监控和管理，确保资产使用的透明性和可追溯性。 2. **流程管控**：通过规范的管理流程，系统提高了资产的利用率和管理效率，使得审批中的数据和业务流程能够快速自动化流转。 3. **账物相符**：系统能够实现账目与实物的一致性，通过盘点和统计报表等功能确保资产信息的准确性。 4. **折旧计算**：根据固定资产的实际情况和国内惯例，系统可以采用平均年限法等方法对固定资产进行折旧计提。 5. **功能全面**：系统涵盖了资产档案管理、采购管理、使用管理、处置管理、盘点管理和数据查询等多个方面的信息化管理，同时也支持根据用户需求进行定制开发。 6. **结构灵活**：资产管理系统通常采用B/S或C/S结构，结合分布式数据库技术，以适应不同企业的需求。 7. **操作便捷**：系统支持在线发起采购申请、移动审批等操作，提高了工作

AI知识工厂： （a）自动通过URL爬虫网站信息 （b）自动为知识进行标签化 （c）人工对知识进行深加工 （d）对知识进行发布

基于二手车交易数据的二手车估值平台项目 构建日均爬取20万条以上数据的网络爬虫，从二手车交易平台获取车辆的报价、售价、使用及保养情况等数据，通过机器学习算法对二手车进行估值。主要使用工具：Scrapy、Redis、Django、Mysql。

位置信息(GPS/Location)脚本编程语言手机游戏绘图(Drawing)文档管理目录服务LDAP虚拟机XMPP即时通讯3D图形处理库中文分词库缓存系统网络爬虫网络工具包Excel开发包服务器软件套件 换一批

1.项目其实很简单，无非就是获取响应数据，分析数据，得到相应地址，下载并保存 2.全程独自完成，利用的正则，bs4等相关工具，精准实现所有功能 3.很多网站都会进行反爬设置，关键是精准找到对应接口

本程序使用Python语言编写，使用的是Flask轻量级Web应用框架，数据库采用MySQL设计，使用百度开发的开源的ECharts图表库进行数据的可视化显示。招聘信息数据的爬取使用Requests进行，爬取的招聘网站为拉勾网，拉勾网有较强的反爬机制，所以采用Cookie的形式进行封装，再进行数据获取。获取的招聘信息数据存储到MySQL数据库，然后使用Pymysql包连接MySQL将查询的数据展示到页面。

项目描述：基于一线业务部门需求，抓取国外导购同行的网站商品信息数据。项目需要采集几十个同行站点，我们使用Python爬虫框架scrapy完成，主要采集信息包括商品的出站链接，商品图片以及价格等等。项目中将数据抓取，图片采集和上传，出站链接的解析和清洗分离开，各自完成自身功能。采集过程中通过对接elasticsearch和grafana报警系统对某些指标进行监控，采集完成对数据进行检测校验 重复，缺失和异常的字段，及时修正，数据通过rabbitmq队列推送给需求方。 责任描述：研究同行的网站结构，编写爬虫脚本采集商品数据； 对采集后的数据清洗、去重、整合、入库； 完善日志输出信息，对接监控和告警。

1. 病案填报：对病案数据填报以及自动填报，并且以纯 js 对填报数据校验。 2. 填报审核：审核角色将填报病案审核。 3. 数据上报：将填报数据上报到国家平台。 4. 数据统计：使用 echarts 做图形及 gridManager 表格对填报数据统计。 5. 系统管理：系统用户、科室、角色、填报模板配置等。