Python

1、本项目是某政府的火锅节活动配套投票程序，主要模块有： 1.1 商家展示模块，用于展示参赛的火锅店/饭店 的店铺信息（名称、地址、电话、菜品）、环境图片、菜品信息等。 1.2 用户投票模块，普通食客可以微信登录，给自己喜欢的店铺点赞、投票等支持。主办方会根据投票的结果给商家颁发各种奖励。 1.3 用户意见反馈模块，用于给普通用户向主办方反映意见，如菜品价格是否合适、卫生状况是否达标等等。 1.4 用户积分模块，用户通过投票、点赞等活动可以累积积分，主办方依据积分设置奖项，用户凭积分兑换奖品，用户还可查看自己的积分情况和所获奖品情况。 1.5 后台管理模块，主办方通过后台实现对商品、用户等的管理，并可以获取每天的数据统计报表。 1.6 奖品核销模块，是一个独立的APP小程序，主办方工作人员可以通过该APP，扫描用户的二维码信息，进行奖品兑换。 2、我负责哪些任务，采用什么技术栈，实现效果如何 2.1 我个人独立完成了所有内容，从界面设计、后端程序搭建、到服务器部署，都是我个人独立完成的。 2.2 采用的技术栈主要有： 后端：Python的 django rest framework 数据库：MySQL 前端：vue+uniapp+微信开发者工具 部署：nginx+uwsgi+阿里云服务器 2.3 实现效果： 全部实现了客户要求的效果，在整个火锅节期间运行良好。 3、遇到哪些困难怎么解决的 遇到的主要困难：客户要求先给二维码印在海报上，即程序还没开发小程序的二维码已经确定了，这给后续部署带来了挑战。 解决：通过微信小程序的“扫普通链接二维码打开小程序”功能，先申请服务器地址，制作了二维码，后续开发完成后再链接部署上线。

1、该项目是数据仓库项目，分为财务、供应链、经销商等多个主题，数据经过处理后对外提供报表和接口服务 2、我负责数仓的整体架构&设计和数据处理。

功能描述：fabric 是一款基于 Python 的命令行工具，是基于 SSH 协议的自动化代码发布工具，可实现环境的一键检查，代码补丁的一键发布，并且能够实现基础环境的自动化部署。 开发环境：Python + Centos7 + fabric + ansible 开发工具：PyCharm 个人职责： 1、根据项目负责 fabric 功能的设计; 2、针对不同环境的模块代码实现一键发布; 3、通过添加公钥建立与远程机器的免密连接； 4、根据不同业务编写 playbook 实现 code deploy； 5、利用 ansible 实现一键备份与扩缩容操作; 6、配置 Jenkins 工程和 git 仓库进行版本发布； 7、利用 crontab 实现每日组件自检、OS 自检；

快捷餐饮后台管理系统是服务于各大餐饮品牌的通用后台管理系统，各门店 餐饮系统可控制内容投放、内容播放时段等，旨在于打造一体化屏幕化餐饮管理系统； 项目环境：Python + MySQL + Django + Centos7 + Docker 项目链接：e.showtop.com 部署环境：阿里云 ECS 服务器 个人职责： 1、参与项目初期资源评估，并输出资源开销文档; 2、负责项目灰度环境，生产环境的构建; 3、根据应用系统需求编写自动化发布工具; 4、制作系统优化等一键执行脚本； 5、利用 ansible 进行生产环境监控系统的一键安装； 6、利用 Prometheus 集成 Grafana 构建可视化监控平台; 7、利用 logrotate 实现环境日志的切割以及存储; 项目业绩： 1、完成项目中的 Linux 平台的搭建和部署,保证了项目的顺利进行。 2、 负责项目中对于数据库 MySQL 的定期备份以及灾备； 3、 完成基于 Prometheus+grafana 的监控系统搭建； 4、 完成基于 ansible+fabric 的自动化工具构建； 5、 利用 crontab+logrotate 实现日志的定时切分以及保存； 6、 负责 jenkins 日常版本发布工作，为开发团队提供系统技术支持，部署服务，优化系统性能及故障排查； 7、负责公司阿里云服务器、Mysql 数据库等日常维护，保障线上所有业务正常稳定运行；

项目描述：马良智慧屏管理系统是 KFC 全球餐厅后台屏幕管理系统，是专属 KFC 门店工作人员去管理终端设备，控制内容投放、屏幕管理、设备注册与激活，支 持单屏、联屏投放等多功能，为门店提供多样化内容服务，内容共享。 项目环境：K8S + Docker + Rancher + Python + PostgresSQL； 个人职责 1、通过 Haproxy 实现入口流量的转发; 2、利用 Pgbouncer 连接池来规避数据库压力; 3、基于K8S搭建生产环境并进行集群部署； 4、利用 hordor 进行 Docker 镜像版本存储; 5、基于 rancher 进行集群的节点调度、节点扩缩容等； 6、基于 node_exporter 监控各节点基础指标数据； 7、利用 Prometheus 集成 Grafana 构建可视化监控平台; 项目业绩： 1、实现基于 k8s 完成项目环境的部署； 2、完成后台业务功能模块的开发； 3、实现基于 k8s 的版本迭代以及日常功能更新； 4、实现正式项目环境中业务功能模块的可视化监控展示； 5、实现基于 fabric 的自动化版本发布工具

项目环境：Jenkins + SVN + Python + Linux + fabric； 个人职责： 1、通过Jenkins平台构建项目Project工程; 2、利用SVN进行开发代码分支的存储; 3、基于Python实现fabric自动化工具的编写； 4、基于Jenkins平台实现不同环境的模板发布; 5、基于shell脚本完成在Linux环境下的自动化工具的构建，如OS层自检，服务组件检查；

利⽤机器学习⾃动检测Hadoop中执⾏慢的节点、并且⾃动分析其根本原因。实验是基于6个异构的 Hadoop节点多轮分别运⾏不同类型，不同负载的任务。采集执⾏过程中的各种核⼼性能数据，CPU占⽤率、内存占⽤率、Job执⾏进度、硬盘负载、⽹络I/ O，利⽤机器学习检测数据的离散性，⾃动检测异常。对异常节点再次进⾏分析，对异常原因进⾏分类，然后训练⼀个基于 随机森林的模型。对实验组进⾏实验，最终实验 的结果精准率98%、准确率97%、误报率6%

1、功能：实现数据的定时同步给外围系统 2、施工python技术，制定读取数据库需要同步的表单，并生成需要同步的文件及分隔符，已经数据的清理，每天定时同步ftp服务 3、搭建ftp服务供外围系统的访问和获取同步的数据文件 4、实现方式灵活，不受应用程序的改动影响

1、数据分析，数据可视化。实现文件数据的分析加工和可视化展示。 2、自动化工具，模仿人工操作系统、自动登陆、自动提交、文件自动下载、自动化测试、自动处理逻辑清楚切有固定的工作等内容。 3、爬虫。 4、

此平台作为国内top5的互联网公司的重要业务数据处理平台，日均处理数据超30亿条（10T以上），支撑公司的重点业务。 平台包括数据处理系统、数据管理系统和旁路支持系统三大部分，提供包括数据的批量处理、实时处理、可视化管理、监控报警、指标报表等功能，支持业务人员通过拖拉拽简单配置的方式对数据和任务进行创建更新和管理，并支持任务的自适应调整和恢复。 作为平台负责人，带领研发团队从0搭建平台，并持续迭代，负责技术选型、整体架构设计、核心代码开发（80%以上）、code review等工作。 为适应业务发展和独特需求，以及对公司基础设施的适配，平台涉及从大数据到后端的各类技术，包括但不限于hadoop、doris、flink、zk、redis、kafka、spring、mysql等。

1、搜集A股市场的所有历史行情数据 2、搜集A股市场的所有股票板块信息 3、自动化计算板块指数等 4、自动化部署python脚本 5、数据监控报警

1.解析一类网页，批量爬取所有页面的信息上传mysql 2.独立完成，主要用Selenium操作 3.Selenium点击容易报错，使用了try-except解决

1.个人计划，类似于便签之类的记事本、学习模块、测试模块、个人中心 2.独立完成的app，简陋，大多是vue2自带的标签，和下载的api，后端java用的springboot 3.自学的各种技术，难点就是知识不好搜

内容: 该项目为自研项目，项目旨在帮助客户公司人力资源部门完成各部门成员的档案管理、新员工的招聘、公司人才库的管理、人员历史晋 升档案的查询、线上员工考核的评分问卷管理等功能。 业绩: 1、完成项目立项，与客户公司人事与行政部门沟通相应需求并给出专业建议完成项目功能的落地(思维导图)，按照功能与页 面分配相应的任务给组内成员。完成项目基础数据库结构的设计，与人事与行政部门沟通对应的页面设计以符合公司的形象。 2、帮助客户公司人力与资源部完成人员数据的线上管理，提升企业的核心竞争力。

1.项目分为数据清洗、模型构建、训练与测试等部分。 2.本人负责项目的全部系统设计和代码编写，采用rbt3模型对酒店团购的评论进行分类，分为好评和差评两类，训练后准确率达到90%+。 3.不足之处：采用的rbt3模型比较小，如果换为gpt或者bert模型，准确率可能还会提升一两个点。

1.项目基于Transformers库，利用IOB2标注体系，标注文本中的实体及类别。 2.本人负责全部代码撰写，采用Bert模型，F1达到0.957。 3.需要改进的地方：未编写用户界面，只面向开发者使用。

功能模块：南方航空官网机票查询、东方航空机票查询、飞猪官网机票查询、机票信息整合 功能实现：依次自动进入南方航空官网、东方航空官网以及飞猪官网，选定行程日期并根据指定的出发地和到达地查询经济舱机票信息，将从南方航空官网、东方航空官网查询到的航班信息，根据南航或东航的航班号依次与从飞猪官网查询到的信息进行价格比对，获取价格较低的一方，按照价格升序排序写入 Excel 表格中 功能难点：飞猪官网有个滑块验证，因为网页使用的是画布技术，所以无法获取图片信息进行破解，最后这部分是使用的固定像素移动通过大量尝试破解滑块，如果长时间无法破解滑块，可以采用人工干预的方式手动进行滑块验证

本作品基于用户行为数据分析和Web端开发，结合python算法编写等前沿核心技术，设计并实现了一个基于用户行为数据的网页评估平台。该平台不仅能够实现对于网站问题及故障的分析，还可以实现用户个性化需求。这些优势使该产品能更好满足社会网页评估的需求，帮助企业完善用户网页使用体验。系统对网页评估的准确率。系统架构采用行业主流的MVVM框架，保持应用程序逻辑和用户界面（UI）之间的分离。此外，系统搭配Vue.js、Django REST framework前后端框架进行开发，部署于Microsoft Azure服务器，确保了高可用性和稳定性。该产品现处于内测阶段。在使用体验上，本平台致力于为用户提供便捷、高效的服务。用户无需安装任何软件，只需通过浏览器访问平台即可开始网页评估，操作简单直观。通过对评估结果的详细展示和分析报告，用户可以轻松了解网页的性能和存在的问题，为网页优化提供指导。 本人负责设计算法和数据库，对用户行为数据进行分析，提出改进方案。同时为产品经理，负责整个产品的规划、执行和监控，确保产品按时、按预算、按质量完成。

1、获取东方财富网站不同股票的资金流入信息 2、难点信息较多，爬取速度慢，解决方案：利用多线程加快爬取速度

数据收集：从各种来源（如数据库、文件、网络等）收集相关的数据，确保数据具有高质量和可靠性。 数据预处理：对原始数据进行预处理，包括清洗（去除不完整、重复或无效的记录）、转换（将不同格式的数据统一为相同格式）、归一化（将不同范围的值缩放到相同范围内）等步骤。 数据挖掘算法：选择合适的算法对预处理后的数据进行分析和挖掘。常用算法包括分类、聚类、关联规则等。 模型评估：选择合适方法对模型进行评估以确定其准确性和可靠性。评估方法包括交叉验证、ROC曲线等。 模型应用：根据挖掘结果进行决策或预测。例如，可以根据分类算法对客户进行分类，以便制定更好的营销策略；可以使用聚类算法对产品进行分组，以便设计更好的产品组合。 数据可视化：将挖掘结果可视化以便更好地理解数据。可视化可以使用图表、图形、地图等方式呈现数据。