数据存储

项目背景：北京商务部经合局境外电商援建项目 结合老挝农产品电子商务现状、调研情况，基于中国成熟的农村电子商务体系建设成 果和经验，建设具有适宜老挝现状，并具有可扩展和引领电商行业发展能力的农产品电子 商务平台，完成以业务中台、数据中台、农产品B2B电子商务平台、农产品B2B跨境电 子商务平台、客户服务中心、主动营销中心、全渠道接触中心为核心的能力和子系统建设。 项目技术：spring boot+nacos+validation+mybatis+easyexcel+ 远程调用:openfeign 限流熔断: sentinel 分布式事务: seata 缓存：redis 数据库:mysql 数据实时刷新:websocket+rabbitMQ 搜索引擎： ElasticSearch 即时通讯：IM 主要负责客服工作台相关功能的开发设计工作，及部署任务。完成任务跳转、工单流程、IM 会话通讯 ，基于开源组件 IM 进行二开以适应老挝电商项目会话需求。

对新零售痛点进行处理（打通线上线下数据）、无人便利店（RFID、线上客服）、数据分析（商品亲和性、商品动销、商品标签、用户标签）、供应链（商品仓储安排、门店与供应链自动生成补货计划）、门店小程序、运营活动自动生成建议、支付系统集成 1、负责整体项目框架搭建（spring cloud、redis、zookeeper、kafka、mysql、es、auth、netty） 2、负责整体项目产品思路以及产品原型（使用axure以及磨刀） 3、负责服务器维护（linux） 4、负责人员安排工作（gitlab） 5、负责人员代码审核、合并、分支安排（gitlab）

从oracle数据库提取数据，根据要求处理数据后写mysql数据库，过程中使用了kettle工具，通过python编写自动高度工具，以及复杂的数据处理逻辑。

时间范围 2019.11-2020.12 职 务 开发负责人 项目背景 xx系统提供会计记账服务，xx系统提供商贸批零企业的进销存业务管理服务。企业的进销存业务产生了资产的流动和转移，需要进行会计记账，如何将好生意的业务交易自动转换成会计凭证是很自然的应用。如果让进销存把业务交易转换成会计凭证，需要让进销存业务开发人员理解会计凭证对象模型基本逻辑，这种业务模型和业务逻辑的相互渗透和依赖是不符合应用思路的，因此，需要寻找一个能有效隔离业务模型和财务知识模型的中介架构。 技术架构 依托阿里云EDAS平台，建立独立会计平台微服务独立部署，通过消息队列实现业务系统和会计平台解耦。 Spring + MyBatis + Redis + RocketMQ, 分布式式部署 技术难点 1、模型抽象（建立一个业务方和财务方均能理解的中介模型） 2、数据一致性。 财务数据较为敏感，对数据正确性要求较高，分布式环境下同一个单据顺序发生的事件需要保证按照实际发生时间顺序处理；财务内部凭证和账表之间的一致性。

技术介绍: 项目架构: Flask框架+FlaskSQLAlchemy数据库+FlaskRESTFul设计风格+Redis缓存+Numpy+Pandas+Matplotlib可视化+Git 技术描述: 1.使用flaskrestful设计风格，使用蓝图进行多模块化管理；使用类视图管理模块业务 2.使用HTML+CSS+JS设计前端页面 3.使用MySQL管理学生，班级数据；使用Redis数据对页面数据，进行分页缓存 4.使用Numpy数据进行统计，处理；使用Pandas+Matplotlib对数据进行可视化显示

该项目是公司自主研发的一款主要针对大学生的一款社交软件，项目包含？二手闲置物品的售卖，脱单墙、课题问答还有签到等模块其中该项目还有代买代送和快递代取模块可以让大学生在校期间在此平台做兼职的功能。 开发环境：idea、tomcat、mysql、maven 项目所用技术：SpriingBoot、mybatisPlus、Shiro、redis等. 主要职责：负责代买代送，快递代取、脱单墙、每日签到、课题问答和对应的后台管理代码的开发并测试代码并完善。

Python开发各类异构数据库Oracle、MySQL、SQL Server、PostgreSQL数据库之间传输，Oracle TO MySQL，SQL Server To MySQL，PostgreSQL TO MySQL，聚合公司内部OA、CRM、宏景人事、SRM、365外勤等各类应用系统数据库归集到MySQL数仓进行统一分析，并通过开发Flask Web API供内部开发人员和外部供应商开发人员调用，承担海康Springboot 接口数据传入人事系统SQL Server的Python API数据入库开发并对考勤数据进行SQL分析开发Web实时下载Excel报告和定时Email发送报告给行政经理及部门负责人

1. 用户权限管理 2. 约定接口格式 支持用户算法交互 3. 用户侧下载工作站本地算法计算 上传结果和过程 4. 算法计算效果解析 排行 5. 文档权限管理

国内某上市互联网公司线上零售分销系统;主要功能有财务发票管理、供应商管理、产品管理、物流管理、订单管理等功能；

自研的数据迁移系统 应用场景： 当单数据库因性能原因需要进行分库分别设计（数据怎么迁移就成了个大问题），该系统正是解决该问题，用于老数据库到分库分表数据库的数据迁移 系统功能： 支持全量数据迁移和增量数据迁移 系统亮点： 1. 可实现不停机数据迁移（线上迁移） 2. 支持全量数据迁移和增量数据迁移 3. 滚动拉取数据方案 4. 防止增量同步数据丢失和高效写入方案 在增量同步环节，我们是通过canal监听mysql中的binlog⽇志，然后canal再将监听到的binlog⽇志，将 binlog⽇志放到RocketMQ中的 5 . 支持扩容

项目为某学校舞蹈实训学生端web应用； 主要功能：学生登陆，管理自己信息；进行在线阶段舞蹈学习；尚传个人舞蹈视频，可供其他人打分，评论 负责功能：项目需求对接，前端页面开发，后端接口开发，整体功能测试，项目部署，调试，维护

物业管理系统极大的提高物业管理效率，此系统分为以下家大模块： 缴费管理、周边设施管理、物业公告管理、楼盘管理、投诉等一些列板块 这些模块和功能可以帮助物业公司实现全面、高效、便捷的物业管理，提高公司的竞争力和市场占有率。同时，也能够增

模块分为：登录模块，视频模块，后台上传视频模块，考试模块，编辑个人信息模块 【60%】视频模块，cdn加速 【30%】考试模块

1.生产督办，事故报告，等所有数据集中管理，实现集中、统一管控模式 2.平台中审批流程，可实现邀请多人审批，使数据更规范化和灵活化 3.安全检查流程自动生成任务，实现平台自动化

待办事项、抄送传阅、办理历史、发起申请、申请历史、我的草稿 组织管理：组织管理、用户管理、角色管理 流程管理： 表单表单设计、流程设计、流程实例管理、任务管理 系统管理：字典分类管理、异常日志、系统资源、系统属性、常用脚本、短信邮件通知

该项目主要以门店为维度开发出的易于门店使用的管理系统，包括但不限制与人员管理、货品管理、财务管理以及商品管理。以店长为常规用户通过操作商品的交易系统链接各个板块，对整个商业交易行为提供一个交易管理平台

1:爬取模块，实现数据获取并保存到本地，并备份至数据库 2:数据分析，实现清洗数据，数据统计，根据需求计算概率 3:通讯模块，根据需求每天定时将结果发送至'邮箱'或者'微信'来查看, 全权负责. 难点：加密，源码带壳，数据源 不限于小说，视频，音乐等其他数据。 需要整套或其他私。

江苏省音协考级app，报名、付款、考试等流程开发。 后台管理系统报名列表、费用统计、成绩统计、导入导出等开发。

XX网站信息提取 按客户要求，提取它需要的信息存储。 爬取某网站用户的个人ID和联系方式: 该项目主要针对某网站(论坛/社交平台等)的用户资料信息进行爬取,通过分析目标网站的页面结构,定位包含用户ID,名称,联系邮箱,电话等信息的网页元素,使用请求模块获取页面源代码,然后通过解析模块提取出这些元素内容,最终得到这些用户的ID和联系方式,并存储到数据库中。实现高效批量获取用户信息以及后续分析利用的目的。核心在于定位信息元素和快速批量爬取。大体流程包括确定目标网站、分析页面结构、构造请求抓取、解析提取信息、数据存储,以及必要的添加代理/缓存等优化手段。

项目描述： 来伊份App致力于打造智慧新零售，为消费者带来线上线下无边界的智慧服务。 本项目主营核心业务板块： 1. “扫一扫”领卡入会成为品牌会员，领取会员权益，扫码活动领取门店优惠卷。 2. “会员码”打开来伊份会员码，一键完成支付和优惠核销，享受专属会员权益&福利。 3. “外卖”，在家即可订购来自世界美食大师严选臻品零食。 本项目致力于本土社区团购业务，一种互联网线上线下购物消费行为，是依托真实社区、来伊份线下数千家门店，打造的一种区域化、小众化、本地化、网络化的团购形式。依托线下门店打造社区和团长社交关系实现生鲜、零食等快消商品流通的新零售模式。 主要业务模块： 拉新模块、签到、外卖、伊起拼、闪购、会员码、无聊IM、积分商城、邀请好友、领券中心、发现等业务模块。 技术选型：SpringCloud Alibaba、MyBatis、MySQL、SSO、Redission、Redis、RabbitMQ、ElasticSearch、ELK 开发环境：Git、Jenkins(CI/CD) 部署环境：kubernetes、Docker、Nginx 岗位职责 1. 负责平台管