数据存储

精通Java、Golang、Python( 熟练pytorch、flask、django等框架)语言,精通SpringCloud、Dubbo等主流框架,熟练使用Redis、MQ、ES等常用中间件产品,具有高可用性,高扩展,高性能的架构设计经验,熟悉各种云服务(AWS、GCP、腾讯云、阿里云、华为云)提供商和解决方案,能够根据业务需求选择最适合的云平台并进行架构设计和部署,我在处理高并发和海量数据方面有着深入的了解,能够应对复杂的技术难题,确保系统的稳定性和可靠性
740Java支付(Payment)
随着项目的不断扩大,工厂需要越来越多的分拣人员,需要更多的配送司机,之前的手工记账,再申报给财务付 款的模式已经不能满足当前业务的发展。工厂管理人员和财务人员急需一个能够系统计算工资,然后财务系统付款并且能够 查询付款记录的工资管理系统,减少在工资方面产生的时间以及减少错漏发的情况,经过2个多月的时间,开发了工资管理系 统V1.0。 负责内容:1.整个工资系统的开发,包括分拣工资和配送工资。
540Java数据库管理工具
项目为开发一款完整的互联网电视机顶盒,包括了硬件和软件部分,实现了电影播放,搜索等功能, 我负责了UI设计,视频转解码,音频数据处理等功能,使用C语言。
760C/C++视频(Video)
离线数仓:在服贸会的官方网站上获取数据信息,存入第三方数据库中,从mysql库中获取信息,利用公司的城操调度,T+1的形式存入hive库中。由大数据工程师通过 hive 的分层建模,需要得到各省市区,境外的参展商,专业观众,新增企业数、疫情下的人流量、票务证件的使用情况、各地区的订单金额等有效信息,通过城操调度将数据结果存放在 MySql 中。然后将数据并进行分析以及调用数据进行数据BI报表展示。 实时数据:通过接口,接入入场人的信息,通过闸机获取公安的个人核算报告,然后通过FlinkSql进行计算。 接入大屏进行展示。 业务需求: 省市区:行业分析、组展机构、展品展馆 年 度:企业新增、用户分析、新增参展商 月 度:公司概况、主播分析、内容分析、地域分布处理日度、月度金额占比、订单增长率 周 度:直播数据,直播观看人数,直播间pv,uv统计,洽谈间人次,各网站浏览pv,uv 直播分析:论坛活动,会议直播 会展数据:当日进场人数,当日票务总计,当日制证总计,闸机人数统计,展馆人数统计 各pv,uv来源:官网,APP,小程序,H5 展台/
920数据存储
需求方每天都要到某网站获取当日数据,写入EXCEL模型,进球数据分析,手动复制粘贴工作量巨大,耗时长,至少需要占用一个员工每天枯燥的工作几个小时。没有技术含量却占用大量人力资源。 通过我编写RPA程序自动完全数据获取和数据分析,完全解放了人力资源节省了时间提高了效率。
1020python数据存储
本项目是一个自助数据分析平台,用户可通过在前端配置自己需要的埋点字段,然后会下发一条埋点规则数据至消息队列,数据端通过采集规则数据与埋点数据进行匹配后,对数据进行落库,实现用户自定义分析的目的。 1、项目主要分为3大模块 (1)主要看板模块,包含每款游戏最重要的运营数据,如付费、日(周、月)活、用户留存、LTV、ROI、内置广告变现、玩法、用户画像等基础数据 (2)分析模块,此即为平台使用用户可自定义分析的模块,包含事件分析、留存分析、漏斗分析、间隔分析、分布分析、路径分析、属性分析等 (3)用户模块,如用户标签、用户分群、用户行为细查等 2、负责任务:我在其中的工作主要是数据端的工作,对前端的埋点规则进行解析后,合并正常的埋点数据写入至Clickhouse中,由于某些APP数据很大,某些APP数据量很小,因此就涉及到性能优化。涉及到的技术栈主要包括Flink、HDFS、Clickhouse、Kafka、MaxCompute、Java等 3、难点解决: (1)由于需要把Hbase当成Dim维表来使用,且开源的Flink-Connector-Hbase只提供了单条异步访问的使用方式,而H
1280Java作业/任务调度
随着计算机技术的迅猛发展,市场竞争不断加剧,为了给客户提供更合适的产品和更有效的服务,最大程度地提 高客户的满意度与忠诚度,降低企业的人员管理成本,提高服务效率。我们研发出适用于这些场景的售后管理系统。 负责内容:1.整个售后模块,包括客户申请售后,客服处理售后等,售后模块包括:申请,处理,审核,退余,退金额,补 发,换货,取回等模块。
520JavaVue 组件
本智慧党建系统是关于党建系统内容板块较大,包含党建宣传、活动开展与报名、网络课程学习、在线考试、书记信箱、监督平台、调查调研、三会一课、民主投票等
860Java小程序
功能主要就是跟电池主板进行交互,通过Type-c数据线与硬件进行直接通讯,获取电池电量,从后台获取最新固件更新,以及电池温度等信息,进行数据交互
590android数据存储
公司的门户平台网站,页面展示公司各个产品,通过产品授权获取产品的使用权限。 为公司其他产品提供用户角色管理中心,权限管理中心,产品注册中心,授权中心。
790JavaJava
介绍: 污染源动态活动水平库旨在为陕西省西安市生态环保局打造一个数据融合,数据分析、治理、监控的平台。打通西安市各区县间数据不完整,数据实时性差、各部分间数据流通不畅的问题,为西安市生态环保局提供可视化的数据分析,为环境治理工作开展提供重要的数据依据。 1.【项目模块】: 1)数据接入模块:http请求、tcp/udp接入,jdbc连接、excel导入等 2)数据处理模块:接入的数据入库后通过sql查询过滤方式等清晰,过滤,分组,聚合等形成数据集,数据自资产 3)数据分析模块:对整理的数据进行分析,展示 2.【我的职责】: 1)负责整个数据存储,数据分析平台的搭建 2)动态活动水平库技术架构 3)数据接入、数据清洗的负责人 3.痛点难点: 1.数据的多样化:目前西安市环保部分的数据多样化存储在各个部门的不同系统中,需要一套清晰的数据标准及接入流程使得各部分间的数据能够实时、准确地汇入到动态活动水平库中,对此,我带领小组成员为期两个月的时间,主要调查,分析各部门间的数据录入情况,各部门的系统数据情况,数据的更新周周期情况,数据的真实可靠情况等。指制定了一套专门针对不同时期平台的数据接入模
540Java数据库建模
以多身份多名片的机制来满足不同人在不同场景的需求;以链接一切为思想,实现不同定制app能互联互通;以为人们 生活提供便利,为打造智慧城市为目标的来提供一种技术支持、一款产品、一种服务
670androidandroid
1.负责投资派 和投资宝的 Android 客户端开发,理财产品列表清单,个人中心,我的融资服务等模块 2.版本迭代,渠道发布 3.集成易联支付,联联支付等第三方支付 SDK 其中本人参与了一些自定义控件的实现,波纹图,趋势图,页面列表使用 listview 实现,优化滑动卡顿,数据重复等问题
1360android支付(Payment)
知识图谱项目 使用NebulaGraph/JanusGraph,ES,Hbase,Mysql,Redis,SpringBoot等技术栈。 可作用于不同场景,例如普惠金融、反欺诈、集团关系、资产保全等等。
700Java集群/负载均衡
算法实现方面:以识别生产线中异物为目标,基于深度神经网络实现目标检测。 (开发语言:Python) 算法改进方面:设计、应用、改进 YOLOv3 网络模型及其梯度寻优方法,并通过实际生产数据集进行测试。 前端交互方面:基于 Vue 框架、Flask 框架,针对检测算法开发 BS 架构的用户操作软件。(开发语言: JavaScript、HTML)
900C/C++vue
1.本项目为山洪系统项目,项目包含了河渠等水利的水情监控以及分析数据统计,以便用户根据水雨情快速采取相应方案。 2.负责整个项目开发需求的表设计、业务模块划分、项目部署;根据产品经理沟通后的需求,落实可实现的功能,同时兼顾解决测试提出的bug、不合理的逻辑等;对代码、数据库表进行优化,提高接口查询速率。
600Java数据存储
质量管理系统主要是给工厂类质量分析的,有基本的表单填写,编辑,查看等功能,可视化报表等功能,主要使用java的springboot、springmvc、mybatis等后端技术以及html、css、jquery等前端技术来实现
1040JavajQuery 文件上传
以万年历阳历日期为准,匹配相关的农历,星期,天干地支,等相关的信息再进行筛选,匹配出相关的有价值的数据。
900pythonPython开发工具
1、参与 MYHuawei 项目中社区模块,完成帖子详情页的相关任务,进行版本迭代,需求分析,制定方案,开发新业务 2、维护老代码,重构优化,修改问题 3、配合测试人员完成版本发布 4、社区模块包含用户发布的图片贴,视频贴,一般贴几种类型,其他人可以浏览,点赞,评论,复制内容@好友等,页面通过 recycleview 实现,瀑布流式布局,参与优化列表刷新滑动闪烁等体验问题
3700androidActivity
cmu15445-2023开源项目
这是一门质量极高,资源极齐全的 Database 入门课,这门课的 Faculty 和背后的 CMU Database Group 将课程对应的基础设施 (Autograder, Discord) 和课程资料 (Lectures, Notes, Homework) 完全开源,让每一个愿意学习数据库的同学都可以享受到几乎等同于 CMU 本校学生的课程体验。 这门课的亮点在于 CMU Database Group 专门为此课开发了一个教学用的关系型数据库 bustub,并要求你对这个数据库的组成部分进行修改,实现上述部件的功能。 具体来说,在 15-445 中你需要在四个 Project 的推进中,实现一个面向磁盘的传统关系型数据库 Bustub 中的部分关键组件。 包括 Buffer Pool Manager (内存管理), B Plus Tree (存储引擎), Query Executors & Query Optimizer (算子们 & 优化器), Concurrency Control (并发控制),分别对应 Project #1 到 Project #4。 值
1280C/C++数据存储
当前共182个项目
×
寻找源码
源码描述
联系方式
提交