数据库连接池

●技术栈：Java8，SpringCloud，Feign，MybatisPlus，RabbitMQ，Mysql，MongoDB，Redis，MinIO，XxlJob。 ●项目描述：数据中台是以采集数据，分析清洗数据为主要目的的一个数据管理平台，目前实现采集数据的方式有两种，数据库备份与爬虫爬取，采集后到数据源模块进行规则配置，然后按规则定时分析清洗。 ●个人职责：我主要负责爬虫模块和数据源的管理功能开发，使用调度中心XxlJob来控制定时任务发送，爬取的原始数据存入MongDB，使用SpringBoot整合的MongoDB连接工具查询出数据后使用XPath和正则表达式匹配出有用的数据后存储到Mysql表中，数据表使用Spring封装的JdbcTemplate创建跟查询操作，提取图片识别使用ocr算法，完成有提取出表格图片数据。校验是人工校验，即人为对比提取跟源数据。现主要负责元数据管理与数据集成模块的业务代码，完成了数据源的配置与测试连接，数据库获取数据的展示页面接口，还有SQL工作台的SQL语句执行的接口。

项目简介: 段子数据采集，对网站上段子作者，段子内容，点赞数据，不喜欢数据进行采集 项目架构: Scrapy框架+pymysql+pandas+Xpath 技术描述: 1.使用Scrapy框架对数据进行采集 2.使用xpath插件分析数据特征，对数据进行提取 3.添加请求头，Cookie，IP代理等信息，解决反扒问题 4.使用Git代码版本工具对项目代码进行管理 5.使用PyMysql将数据存储到Mysql数据库中 6.使用numpy对数据进行处理

技术亮点 1. SpringBoot + MyBatis-plus + Shiro + jwt + Redis + Junit + Vue3 + TypeScript 等技术 2. 数据库：MySQL 3. 其他：阿里云服务器、cos存储桶、RabbitMQ、elasticsearch、NGINX、Docker 4. 前端：Vue3+ TypeScript + ElementUIPlus+node.js等技术

该平台是一个实现对原始数据库数据进行静态脱敏的产品； 主要包括资产管理模块，策略管理模块，数据脱敏模块，数据同步模块 数据脱敏引擎等。 我是该产品的研发项目经理， 负责产品的需求对接、分析， 研发任务的拆分、分配， 代码review， 产品包制作等。 (因产品数据保密原因，下方截图不含数据)

1.主要为银行科技部提供软件生命管理； 2.项目分为需求管理、项目管理、外包管理、考勤管理、全流程服务等模块；需求管理提供从需求提出、需求分析、需求拆分和排期等一些列管理；项目管理提供立项、组建团队、定制高层计划、启动、监控等过程管理；外包管理提供人员入场、资源分配、人员离场，外包结算等服务，考勤管理提供人员打卡、报工、请假、补卡等服务，全流程服务对接其他各系统，实现一体化管理 3.项目采用spring boot微服务结构，各模块可以独立运行，方便业务的扩张与解耦

按天，周，月，学期，学年等维度，统计用户登录情况、产品订购情况、教师，学生使用平台的资源的情况 统计登录人数，次数，定义登录一定次数的为活跃用户，计算活跃人数。

负责mysql、oracle安装和运维 sql语句的编写、存储过程开发和定时器处理 mysql慢查询分析和binlog日志解析 mysql性能调优。参数优化

1. 面向政府 2. 无人机操控，水务相关，可显示无人机航拍图片，并且可以实时查看无人机视角视频 3. 小程序实现人员巡检和问题维修，工单展示和操作。包含问题上报，巡检上报，以及工单驳回，角色分五个，项目部，中队长，巡查人员，巡堤人员，游客，各自有各自的权限。 4. 人员权限 5. 后台系统， 包括人员管理，权限管理，航线任务管理，工单管理

该项目为公司后台数据统计使用. 前端100%由个人开发,使用layui框架搭建完成. 后台100%由个人开发,使用pandas进行数据统计任务. 涉及数据库mysql,clickhouse,redis等的相关操作.

1.该项目分为用户登录管理、媒体影视资源管理、广告用户管理等模块,让营销人员能方便地推广影视作品并获取广告流量; 2.该项目为前后端分离，服务端使用了 Hyperf(PHP + Swoole) 高性能框架, web前端使用了 React 18 框架。使项目轻快流畅，swoole支持api高并发; 3.该项目摒弃了传统的cookie鉴权,以严格的jwt主动无限续期搭配全Restful风格的api,解决了单机并发瓶颈，保证了服务端的安全可靠性,支持更多客户端扩展。 提供测试条件下项目访问账户如下 用户名 admin@163.com 密码 123456

项目描述：马良智慧屏管理系统是 KFC 全球餐厅后台屏幕管理系统，是专属 KFC 门店工作人员去管理终端设备，控制内容投放、屏幕管理、设备注册与激活，支 持单屏、联屏投放等多功能，为门店提供多样化内容服务，内容共享。 项目环境：K8S + Docker + Rancher + Python + PostgresSQL； 个人职责 1、通过 Haproxy 实现入口流量的转发; 2、利用 Pgbouncer 连接池来规避数据库压力; 3、基于K8S搭建生产环境并进行集群部署； 4、利用 hordor 进行 Docker 镜像版本存储; 5、基于 rancher 进行集群的节点调度、节点扩缩容等； 6、基于 node_exporter 监控各节点基础指标数据； 7、利用 Prometheus 集成 Grafana 构建可视化监控平台; 项目业绩： 1、实现基于 k8s 完成项目环境的部署； 2、完成后台业务功能模块的开发； 3、实现基于 k8s 的版本迭代以及日常功能更新； 4、实现正式项目环境中业务功能模块的可视化监控展示； 5、实现基于 fabric 的自动化

一、对接监管端与银行端 本项目旨在实现监管端与银行端的高效对接。通过搭建稳定、安全的通信渠道，确保双方之间的数据传输畅通无阻。 二、银行端系统部署与数据推送 在银行端部署专用系统，用于收集、整理各类金融数据。 通过连接金融专网，确保数据传输的安全性和稳定性。 实时推送银行数据至监管端，以便进行后续的分析和监管。 三、监管端数据处理与分析 在监管端部署接收系统，确保银行推送数据的准确接收。 对接收到的数据进行存储，并建立完善的数据管理体系。 对数据进行格式校验，确保数据的一致性和准确性。 对辖区内所有银行推送的数据进行跨行分析。例如，对贷款资金流向进行追述，分析资金最终用途及是否涉及房地产、股市等领域。 对每个关联节点进行存储，以便监管业务人员随时查看和分析。 四、数据可视化与政策传达 对银行推送的数据进行指标可视化处理，如存款余额、贷款余额等，为监管业务人员提供直观的数据展示。 监管业务人员可通过系统上传政策性文件或通知，确保政策信息的及时传达。 银行可直接在本地web端接收这些信息，提高政策执行的效率和准确性。

使用JAVA编写Mincraft插件，目前只展示登录插件，自己创作有很多插件，比如更好的菜单，计分板，职业插件，自定义枪械插件。数据库连接，可以根据自己的想法去写自己所需要的插件，打包好插件放到服务器内运行就可以知道效果了。

以互联网的方式重构传统商务印刷领域，致力于打造中国最大的互联网印刷和设计服务平台。主要产品包括名片、会员卡、宣传单、海报、折页、易拉宝、X展架、封套、画册、宣传册、手提袋、信纸、信封、档案袋、文件夹、文件袋、标签、相片书、个性化包装、个性化印品等。整个系统分为前台电商网站，营销中心后台，财务管理，运营中心等等几个模块。 责任描述：负责购物车模块以及报表模块开发和维护，相关文档的撰写。 技术要点：使用spring+springMVC+mybatis整合的框架， 1. 使用Redis作为缓存热点数据 2. 使用Redisson客户端做分布式锁防止重复支付和一些接口的重复点击导致的重复请求。 3. 使用RocketMQ消息中间件与其它服务解耦、异步通信。处理大型活动订单服务的流量削峰。 4. easyexcel进行excel文件的读取和生成。并通过异步生成报表并上传到云存储桶通知用户下载对应的报表。 5. 商品模块采用elasticsearch对商品进行全文检索，最终达到了在10亿级数据中查询秒级返回的效果

一、项目描述：共享交换项目主要有：服务代理、数据共享、数据交换、传输策略、数据同步、数据同步等模块 ，项目分为5个包，使用jenkins的方式打包，服务代理主要功能是将用户提供的接口转发的放式转成我们的接口对外提供，目前支持2种接口方式，分别为webservice和http接口，还可以实现跨网系代理，这里跨网系代理需要通过配置传输策略来完成，传输策略是通过配置对应的光闸或者网闸的ftp等策略来实现跨网，数据共享是通过查询数据库的方式将数据生成对应的接口展示出去，目前是可以支持get、post、put、delete这4种接口展示，支持配置的数据源分为sbase、hbase、es、PostGrepSql、greenplum、mysql、oracle、达梦这几种这几种数据源生成接口，数据交换是将数据实体、文件、文本数据通过不同的方式交换到不同的数据实体、文件、文本中，比如我可以将PostGrepSql数据库的数据交换到greenplum数据库中，也可以将ftp上的文件存放到数据库中，实现了数据交换，该模块也可以实现跨往系服务代理，也是通过传输策略来的 二、研发环境及所用技术：Eclipse

该系统通过Spring Boot的快速开发能力，Vue.js的灵活性和高性能，以及MyBatis的强大数据映射功能，实现了高效、稳定的系统架构。系统前端采用响应式设计，适配多种设备；后端采用模块化设计，易于维护和扩展，为用户提供流畅的购物体验。

总部管理，用户模块。实现任务下达，雇员下载任务，任务上传，完成任务情况数据统计。管理员可灵活对各岗位不同人员进行分类授权管理。在系统内实现任务的上传下达，跟踪管理，事中，事后查看，统计总结。难点：前端与后端的无缝连接，数据安全保密。

为解决中大型基金公司每日每月大量数据需求，不同基金账户的资金需求不同。由于询价时由交易部门集体面向市场进行询价。对于询价的结果、分配、质押卷的挑战与校验有效的系统支持，容易出错，借钱利率低的情况。同时，基金经理与交易员之间缺乏有效沟通机制，出现各种各样错误和困难，因此开发相关系统。

1.项目分为活动发布模块，快乐分摊模块，消息模块和用户模块。分别实现了线上活动的发布，活动经费线上分摊，消息推送，用户信息等功能，使用户可以在不同的模块进行独立的操作； 2.我在本项目中充当了后端架构的角色，项目的核心流程都由我一人完成，以及服务商的部署及运维等； 3.在本项目中遇到的难点在于多种不同规则的分摊规则算法及支付安全性和幂等性

根据信创要求，将集中运营 cmbflw/cmbtds 服务 db 2迁移至 Oracle 。梳理去 db 2改造内容，表结构梳理，代码适应性改造，存储过程翻译成 sql ，存量 db 2数据迁移至 Oracle ，转历史等功能开发。