Python

1.web应用自动化操作 2.定时获取web应用内的指定内容 3.将获取到的内容列成excel文件发送至企微 4.使用python实现定时自动化操作 5.使用python代码绕过反爬验证

帮客户在知网上采集31个省的日报内容，从2010年至2023年的每天的日报内容，供客户科研使用 使用python+request查询出每个省的所有日报地址，然后再遍历这些地址，再次请求这些地址，获取到所有的网页内容，期间遇到滑块验证码，使用python+js破解滑块，继续采集数据

1,100%是由我来完成整套过程，数据爬取与数据可视化。 2，用matplotlib绘图，条形图与饼状图， 3，客户只需告诉我想要什么数据，需要绘制什么图形。

1.项目的主要功能是通过语音或者拍照的方式将垃圾识别为分为可回收垃圾，有害垃圾，厨余垃圾，其他垃圾四种类型，帮助用户对垃圾进行分类识别。主要模块分为语音识别模块和图像识别模块。语音识别模块通过部署whisper模型将输入语音转为文字来判断垃圾类型。图像识别模块采用convnext模型对图像进行识别，首先使用收集整理的垃圾图片数据进行训练，然后将模型部署到后端。 2.负责前端和后端的开发和部署，模型的训练和部署。前端采用uniapp框架，后端采用python flask框架，最终实现用户输入语音或者图像之后，系统能够识别并且返回垃圾类型的效果

爬取1688商品列表数据 1、多关键词换行隔开 2、新增价格区间、销量筛选 3、新增采集日志 4、采集字段为：商品名称、商品链接、价格、销量、复购率、店铺星级、诚信通年限、图片链接 5、日志显示显示采集的关键词，页码

资料获取：分析网页，使用数据库获取数据；发送HTTP请求获取数可以使用第三方库如requests来发送HTTP请求，从网络上获取数据；读取文件中的数据；从用户输入获取数据；正则表达式（re库）；BeautifulSoup（bs4）；lxml 爬取 社交、资料、数据等

将xx所车辆与xx统一车辆平台RPA信息自动同步，省去重复录入，减轻100多个单位的工作量，提高了工作效率。可以实现办公自动化。

1、本项目是一个分享开发经验的系统，旨在为程序开发者提供一个交流心得的平台，系统由文章管理、个 人信息管理等关键模块组成。可以兼容安卓，IOS，HTML5，微信小程序4个平台，提高了用户体验 2、在技术选型上，选择了uni-app框架进行开发，使用云函数处理前端发起的请求，数据保存在云数据 库，实现了前后端的统一管理。UI界面设计上使用与uni-app同一厂家的uni-ui库，该ui库基于vue组件、 flex布局，而且可以跨全端，极大的提高了开发效率 1. 负责用uni-app和uni-ui开发奇技分享俱乐部系统的界面和功能模块 2. 开发云函数，处理前端的请求，返回处理结果 3. 实现系统的权限管理和安全策略，包括登录验证，权限控制等 4. 进行界面和性能优化，确保管理系统的用户体验和操作效率

项目名称：二手房数据抓取与存储系统 项目简介： 本项目旨在实现一个自动化的数据抓取工具，用于抓取二手房出售信息，并将提取的数据存储到MongoDB数据库中。该工具采用Python编程语言，结合了requests库进行网络请求、lxml库进行HTML解析以及concurrent.futures模块进行多线程处理，实现了高效的数据采集和存储功能。 系统架构： 系统主要分为以下几个部分： 1. 数据抓取模块：使用requests库向目标URL发送HTTP请求，获取网页内容；利用lxml库解析HTML源码，提取所需数据。 2. 数据解析模块：对抓取到的数据进行清洗和格式化，提取出房源标题、小区名称、房屋详情、价格等关键信息。 3. 数据存储模块：将解析后的数据通过MongoDB连接器批量插入到数据库中，同时提供了事务回滚机制以保证数据的一致性。 4. 多线程执行模块：利用ThreadPoolExecutor管理多个线程并发执行数据抓取任务，提高整体效率。 核心功能： 1. 自动化数据抓取：通过配置好目标URL，工具能够自动访问链家网的二手房页面，并获取相应的房源信息。 2. 数据解析与存

只要与在GPU服务器部署的模型服务互联完成对业务数据的处理，通过该软件调用大模型完成相应的推理任务，并在软件中监控和管理数据

利用python语言拿到网址上数据，进行数据清洗拿到自己需要的数据，利用数据进行可视化窗口绘制，批量爬取音乐，抖音，图片

通过js逆向的方式对h5st3.1加密算法进行破解，h5st3.1由8个部份组成，其中包括当前时间、fp 浏览器指纹、function的id、token、appid+body+fp+token+rd+function等进行一次加密的返回数据、加密算法的版本、13位时间戳、浏览器ua+pin+fp 的加密，其中主要需要逆向第5部分，先对appid+fp+token+rd+function进行字符串拼接并对其做SHA512加密，在对body进行加密，然后将两个加密结果进行字符串拼接并对其做HmacSHA256加密，第8部分虽然也做了加密处理，但都是系统参数可以直接对其写死

Python实现图像处理项目，为以下几个功能模块： 1. **图像采集**： - 负责从摄像头或其他来源获取图像数据。 2. **图像预处理**： - 包括去噪、增强、转换颜色空间等，目的是改善图像质量，使其更适合后续处理。 3. **图像特征提取**： - 从预处理后的图像中提取特征，如边缘、纹理、颜色分布等。 4. **图像分类与识别**： - 使用机器学习或深度学习模型对图像进行分类或识别。 5. **结果展示**： - 将处理结果以图像或文本形式展示给用户。 6. **用户接口**： - 提供与用户的交互界面，如命令控制、结果反馈等。 对于使用者来说，能够实现的功能包括： - 实时图像采集与显示。 - 图像编辑和处理，如裁剪、缩放、颜色调整等。 - 图像分类和标签化。 - 使用图像进行搜索或匹配。 任务包括： - 项目规划与管理，确定项目目标、进度和资源分配。 - 需求分析，了解用户需求，确定功能模块。 - 技术选型，选择合适的图像处理库和机器学习模型。 - 编码实现，开发图像处理算法和用户界面。 - 测试与优化，确保系统性能稳定，用户体验良

python angular redis mysql nginx linux 作品分类（1-5个分类）（必填）： 机器学习/深度学习 脚本编程语言 网络爬虫 日志分析和统计 项目构建 添加标签，按回车确认 HTML5开发相关文件管理器其他jQuery插件Chrome插件/扩展论坛系统BBS作业/任务调度网络爬虫日志分析和统计图形和图像工具Emoji 表情相关终端/远程登录搜索引擎项目构建REST/RESTful项目嵌入式操作系统

1，用户只要告诉我所需要的数据，我用Python爬虫技术就可以将网站数据爬取下来。 2,100%都是我写出的，最终给用户数据就行。 3，数据完整，不缺失。

功能有两个： 1.爬取微博文娱榜前10条：目的是获取微博文娱榜的热度数据，并将标题和热度信息写入一个 CSV 文件中。 2爬取微博的一级评论：目的是通过微博 API 获取某条微博的评论。

为企业内部提供,批量网络安全检测模块,以及无人值守模块,定时,提供检测服务 并作出报警,添加方糖模块,提供实时预警以及实时检测报告, 提供可扩展接口 提升扩展能力,特别增加代理ip功能,应对在大规模ip攻击下的waf的应对能力

负责（基于python语言，torch框架，开源yolov5的目标检测项目，标记图片数据来源—robotflow） 其他（非本人）（包装为安卓测试应用）

使用图像处理技术、人工智能技术，改进了传统的人工监测与识别害虫费时费力、反应速度慢等缺点，极大提高了农业生产的效率。 使用目标检测算法 yolov5 作为系统的核心算法。通过收集大量的数据集进行模型训练，让模型可以自动识别和分类病虫害目标。通过数据可视化，用户可以直观的看到病虫害的数量和种类，同时系统也会给出相关的防治措施建议，极大便利了农户的生产生活。 系统模型的准确率达到80%以上，病虫害覆盖率达到70%以上，给出的防治措施正确率高达95%，为相关的作物人员提供了技术支持

API接口数据和线下表格数据实现结构配置化接口上传. 1、实现批量数据上传 2、实现接口与目标数据源的自动化匹配生成API接口 3、实现读取指定行数上传