并发/并行处理框架

该项目分为 答题模块、错题集模块、图文通知模块、答题记录模块、随机抽题模块、专题学习等模块 使用了uniapp开发小程序的技术、前端组件采用的是uview、colorui等前端组件。 本人负责的是页面的设计与开发、与后端进行数据交互。

1、做过电商类的系统，手机端和后台，微服务为主。 2、做过银行类：党费、代发代扣、缴费通、电子函证、纪念币，单体服务 和 微服务 为主

离线数仓：在服贸会的官方网站上获取数据信息，存入第三方数据库中，从mysql库中获取信息，利用公司的城操调度，T+1的形式存入hive库中。由大数据工程师通过 hive 的分层建模，需要得到各省市区，境外的参展商，专业观众，新增企业数、疫情下的人流量、票务证件的使用情况、各地区的订单金额等有效信息，通过城操调度将数据结果存放在 MySql 中。然后将数据并进行分析以及调用数据进行数据BI报表展示。 实时数据：通过接口，接入入场人的信息，通过闸机获取公安的个人核算报告，然后通过FlinkSql进行计算。 接入大屏进行展示。 业务需求： 省市区：行业分析、组展机构、展品展馆 年 度：企业新增、用户分析、新增参展商 月 度：公司概况、主播分析、内容分析、地域分布处理日度、月度金额占比、订单增长率 周 度：直播数据，直播观看人数，直播间pv，uv统计，洽谈间人次，各网站浏览pv，uv 直播分析：论坛活动，会议直播 会展数据：当日进场人数，当日票务总计，当日制证总计，闸机人数统计，展馆人数统计 各pv，uv来源：官网，APP，小程序，H5 展台/

技术点：springboot,rabbitMQ,camel,Redis,zookeeper,dubbo,mysql,mybatis,nginx,bootstrap,SM 2国密算法，微服务架构 项目简介： 随着时代、技术的进步，已引申出扫码乘车出行的应用场景，而由于各家发码建设主体相对独立，技术标准形成壁垒，长期看分散发展、无序竞争的模式不可持续，也将损害群众公共交通便捷出行的长久利益。 江苏省省委省政府、江苏省交通运输厅要求省一卡通公司牵头建设省移动支付平台，形成全省统一标准、统一平台、统一机具、统一清分结算、支持多种支付方式的架构来打破跨发码方壁垒，协调各家协同发展，实现开放、共享，促进省公共交通行业服务有序健康发展。 ● 负责需求调研，需求分析，系统设计，技术架构等。 负责二维码扫码乘车技术方案制订，负责省内二维码乘车技术规范制订。 负责项目实施方案制订，负责部分核心业务实现。 负责客户、需求、研发、沟通、运维等过程的管理与实施。

算力数据运营平台，通过管理域控制器（xcu/admax/adnoa/bcm）的大数据信息这种方式，提供的服务包括车辆管理域/在线监控域和平台化三大板块，为测试和开发人员更高效的分析和定位问题 1.车辆管理域 包括vin码管理/车辆版本管理/车辆走势/日志查询/负载/温度统计等 2.在线监控域 主要包括lisysm事件埋点监控 xcu/admax/adnoa等日志埋点监控，cpu/mem监控，预警统计包括飞书预警和预警离线统计，周月报预警趋势和版本对比等 3.dtc&告警云图 包括xcu/fsd/noa dtc监控并分析，支持单车/批量/版本/dtc列表等方式分析统计 告警云图将xcu/fsd/noa 日志告警和dtc告警所有的预警进行车辆分析，挖掘日志预警之间的关联性，为后面预警诊断和预测模型提供数据支持 4.数据大盘 包括规则数，jira数，车辆数，日志清洗量，信号清洗量，埋点清洗量，xcu/fsd/noa/bcm各域细分统计

1、30+服务端接口，10+业务场景串联 2、压测模型场景60+、梯度、脉冲、抢购秒杀、长稳等。 3、60W+qps峰值 4、累计20+次发起，发现40+问题，保障大促性能在安全水位。

1、基于pbf+socket+nio实时处理车机传输的点大型云数据；并发处理引导线、障碍物、速度、航向角等数据；页面基于websocket实时前端交互并渲染 2、我负责所有后端任务、及框架搭建，技术选型，实车联调 3、难点是要处理大量的实时数据，并抽稀、去重、纠偏移；处理较大的点云数据通信，并且要在页面不卡顿的渲染，基于多重缓存、并发等技术

项目介绍： 大家保险公司的积分管理项目，负责对集团下所有主体公司的积分收入和积分消费进行管理。项目主要使用SpringBoot+Alibabacloud+Redis+RockerMQ+MySQL+gauss技术栈； 项目主要包含积分查询模块、积分消费模块、订单模块、对账模块、活动模块、价值积分模块、会员模块等模块。 项目职责： 1.使用观察者模式对价值积分发放、领取等多个微服务的代码进行重构，提升价值积分模块代码的可复用性和可扩展性； 2.完成活动管理模块功能开发，其中活动配置和活动查询使用构建者模式完成活动对象的创建，简化活动对象的创建； 3.重新设计了项目的三级缓存架构，极大的优化了接口响应时效，一级缓存为本地缓存，用于存储系统缓存和临时缓存，二级缓存为redis缓存，存储大部分的系统缓存和业务缓存，三级存储位数据库存储，存放所有系统运行的数据。

该教育平台主要模拟在校大学生的实习实训过程，通过平台对学生布置任务，评判结果并最后出具报告。整个平台围绕任务设计，目前包括提供学习的视频任务，用于测试考试的试卷任务和检查学生完成情况的上传成果物任务。平台对过程数据基本保存记录。对上传的成果物（文档和代码）进性了检查，如文档格式，代码格式和风格，文档代码查重等。 平台使用vue，java，mysql，redis，mq等技术。我在整个开发过程主要负责开发任务的分配，进度跟踪，后端开口。同时也会参加产品设计的讨论，任务设计的讨论等。

1，项目分为营销计划，个人中心，客诉查询，营销数据，运营功能，审批管理，系统管理，帮助中心，防控中心等功能 2，我负责了，营销计划，客诉查询，运营功能，审批管理，防控中心；用到了线程并发，审批流，缓存，分布式，分库分表等技术；提高了用户使用体验，提高了收益，提高了用户体验 3，审批流消息同步，查询数据量过大导致相应慢；消息中间件的消息同步技术，数据库深度分页

项目使用与国内某连锁美甲店的收银系统,配合手持收银使用;主要功能包括pc端店铺人员管理、产品管理、活动优惠发布、经营分析等功能；移动端主要负责产品录入、微信支付宝等平台收银。

项目简介：该项目从多个交易所接收实时行情，服务器接收实时数据，响应客户端订阅，把实时行情推送给客户端，同时服务端会生成1、3、5、7、10、15、30、60等各个档位日内分钟数据及日、周、月的日间历史数据，把最近的历史数据缓存及入库；服务端提供tcp长连接的实时推送接口及http的短链接的拉历史数据接口；客户端有网页版及APP版。与app的实时接口是protobuf ，网页版的接口是soket.io; 该系统是分布式系统，支持横向扩展； 采用java开发，缓存hazelcast,数据库mysql;

- 主导构建离线数仓，汇集业务联机数据库和终端用户行为日志数据，实际数据过滤、治理、解析、集成、入库。 - 划分主题建设，为公司提供多种报表统计结果和业务系统技术支持。 - 提高数据处理性能，解决数据漂移延迟，实施数据脱敏和解析参数表的构建。 - 设计并维护多层次数仓结构，包括ODS、DIM、DWD、DWS和ADS层，优化数据仓库查询性能。 项目架构：Hadoop + Hdfs+Zookeeper + Mysql + Hive+clinkhouse+ElasticSearch +Azkaban+dataX+Spark+shull 项目流程： 数据采集： - 使用dataX从业务库同步全量和增量数据。 - 使用flume搭建数据传输网络。 数据分层设计： ODS层：存储未处理的源数据，保持一致性和追溯性。 DIM层：存储各种维度表，例如药品主数据、地区、生产单位、运力_站点等。 DWD层：清晰、规范化数据、采用维度建模理论。 DWS层：按主题轻度聚合数据，例如单位物资日聚合表，仓库自然月集合表，省市区储备表等。 ADS层：存放重要指标的结果数据，提供数据产品和服务。 报表开发：

项目介绍： 该项目是一个由企业自行运营的电商平台，主要提供企业自身品牌的产品和其他相关品牌品销售。该平台涉及到产品采购、商品上架、对商品进行价格、库存等信息的管理、订单管理、支付管理、和售后服务等多个环节，为用户提供方便快捷、优质的购物体验。 主要技术： SpringCloud+Nacos+OpenFeign+Redis+RabbitMQ+Mysql+xxl-job 责任描述： 1.秒杀模块开发，使用 redis 原子指令解决并发读写库存的问题。 2.余额模块开发，使用数据库乐观锁解决用户并发读写余额信息的问题。 3.使用 xxl-job 分布式系统下任务调度模块开发。 4.使用 redisson 分布式锁控制秒杀模块缓存数据加载，避免缓存击穿，缓存穿透等问题。 5.使用 jmeter 压测 QPS2000，平均响应时间200ms。 6.使用 RabbitMQ 异步处理实现用户充值成功短信发送。

1.配置中心模块，负责整个项目的公共配置；登录模块，用户登录；网关模块，负责路由转发；轮播图模块，负责首页图片轮流展示；商品订购模块，预订商品并发送消息；消息消费模块，预订后更新商品并消费消息；商品预订模块，查询商品预订时间；缓存模块，redis配置模块；评论模块，负责评论发布管理；公共模块，项目共通方法模块；商品详情模块，查询商品详情热销商品模块，查询并在首页上展示热销图片；订单管理模块，管理订单；搜索模块，负责商品搜索功能；推荐商品，查询并在首页上展示推荐图片； 2.主要负责后端的登录模块、网关模块，缓存模块和评论模块等。

本项目是一个自助数据分析平台，用户可通过在前端配置自己需要的埋点字段，然后会下发一条埋点规则数据至消息队列，数据端通过采集规则数据与埋点数据进行匹配后，对数据进行落库，实现用户自定义分析的目的。 1、项目主要分为3大模块 （1）主要看板模块，包含每款游戏最重要的运营数据，如付费、日（周、月）活、用户留存、LTV、ROI、内置广告变现、玩法、用户画像等基础数据 （2）分析模块，此即为平台使用用户可自定义分析的模块，包含事件分析、留存分析、漏斗分析、间隔分析、分布分析、路径分析、属性分析等 （3）用户模块，如用户标签、用户分群、用户行为细查等 2、负责任务：我在其中的工作主要是数据端的工作，对前端的埋点规则进行解析后，合并正常的埋点数据写入至Clickhouse中，由于某些APP数据很大，某些APP数据量很小，因此就涉及到性能优化。涉及到的技术栈主要包括Flink、HDFS、Clickhouse、Kafka、MaxCompute、Java等 3、难点解决： （1）由于需要把Hbase当成Dim维表来使用，且开源的Flink-Connector-Hbase只提供了单条异步访问的使用方式，而H

1.实现城市智能建造,包含隧道、交通、电厂、工地等建设，从人机料法环，5个方面实现全面监控，并提供相关建设建议、风险评估、解决方案； 2.多维度、可视化、高性能，从最高集团级管理到现场实施人员提供全面服务；

在业务规模不断扩大的背景下，原有快速搭建的冗杂系统已难以支撑业务迭代与系统压力。为优化系统能力，进行架构的分层服务化重构，并优化原有数据结构，提高存储效率和查询速度。基于 SpringCloud 全家桶，结合个性化的服务发现、服务通讯与配置管理等工具选型，使用 grpc、RcoketMq、Netty、Mysql、Mongo 等多种技术手段，实现分布式的架构系统。 1、作为底层基础服务，重构后的车辆后端系统实现高并发、高吞吐的系统能力，支撑上游服务快速迭代，并简化业务开发复杂度。 2、服务化后测车辆服务，支持 10 余个服务系统，实现每秒万级以上访问，并保证系统 4 个 9 的稳定性。

● 确定元数据、属性、类目、SPU、SKU等实体模型，使用DDD实现新商品中心 ● 使用canel监听MySQL bin log， 使用otter消费bin log并将变更后的记录发送到ONS消息队列中，应用消费消息同步ES ● 使用双删保证缓存一致性，使用lua设置多商品缓存优化查询效率，使用lua批量删除同一前缀的key优化更新效率。

使用框架开发以及插件高效的处理方式，是项目有更好的体验感觉，三个框架都可开发你所需要的项目用来在app的体验上，体验的效果拉满