数据处理

项目描述:是一款打通上上签数据与其他 OA 、人力资源管理软件的连接中间件,主要对接企微、钉钉、飞书的审批和其他软件数据流的收集、转换映射和推送,极大地降低的客户与上上签云端的对接难度和成本,目前已服务30+客户。 技术栈:Springboot、MySQL、ElasticSearch+Logstash+Kibana、Redis、SpringCloud、Caffeine、Commons-pool、Docker、Prometheus+Grafana、Spring-security、ShardingSpehere 项目架构: 1.采用 SpringCloud Alibaba 技术体系构建微服务架构,根据实际业务场景对服务进行拆分 2.以阿里开发支撑注册/查询实例 TPS 达到 13000 以上的 Nacos 作为项目的注册和配置中心 3.使用 Keepalived + Nginx 保证访问入口高可用,防止服务器单点故障的发生 4.基于 Redis Cluster 搭建高可扩展、高可用、高并发的缓存集群 5.基于高性能的 Elasticsearch、Logstash、Kibana
1400Java可视化
这是我上家工作的公司的一个后台管理系统,后端是使用php实现的,用了框架thinkphp,数据库使用了mysql。后台的前端使用的是vue
2830PHP数据查询
一个综合性环境数据处理平台,专注于处理和融合多种来源的排放清单数据,将不同数据源的排放清单进行整合,生成综合、完整的排放数据;同时通过简易融合功能,用户可以从多个维度对整个排放清单进行调控,以适应不同的分析和评估需求,为环境保护和决策提供可靠的数据支持。 项目职责:作为Java开发工程师,参与该项目后端核心功能开发,包括需求分析、架构搭建、技术选型、项目开发等,具体如下: 1) 用户权限认证服务:负责该服务架构设计、系统开发,采用Spring Boot、MyBatis和PostgreSQL(pgsql)数据库。 2) APIsix网关和Wolf的集成:结合APIsix网关和Wolf,根据具体需求,在不同场景下完成用户权限认证和安全防护的实现。有效地保护系统免受潜在的安全威胁。 3) 云平台业务服务:负责开发云平台业务服务中的用户购买记录、使用记录和订单记录等模块,实现模块的业务逻辑处理和数据持久化。 4) 多尺度排放清单融合工具服务:包括专业融合、排放调控和简易融合等模块的实现。为了实现后台计算的解耦和异步处理,采用Gearman和多线程的方式。对算法进行优化,确保在大批量计算时用
1820Java缓存系统
独立负责后端内容 所接手项目 包含商城+小程序 APP crm erp 甲方公司后台 服务器部署 维护 可以熟练使用mysql sqlserver 主从复制 索引配置 队列redis mq 等功能
1940PHP图表(Charting)
开发了一个关于二手房价格市场的数据价格可视化分析网站,主要运用了爬虫技术和可视化技术,以及sql语句实现增删改查功能,同时使用了一些基本的前端的网页制作,将整个网站放入了flask框架下的本地服务器
1030爬虫数据处理
http://61.129.251.136:9981/ 1、抓取A股行情数据; 2、抓取A股标的财务事件; 3、清理后计算指标; 4、按既定策略筛选结果; 5、生成清单和Echarts。
820数据处理
项目介绍:播控系统主要就是给媒体主进行LED的发布,投放分为:轮播,日期,插播,定时;C端用户功能:人屏互动:C端用户在LED大屏前做指定动作,触发摄像头返回数据,可以扫福利广告,领取红包;扫码投屏:媒体主发一个广告,在广告上面放置二维码,C端用户扫码进入智媒宝小程序,可以发布一些生日祝福,告白等广告;星炫互动:C端用户在大屏下面扫码进入一个聊天室,可以在手机端发消息与图片,大屏上以弹幕或者消息的形式展示。这些功能主要是提升屏的知名度,打造一个小商圈。B端用户功能:受众大数据:跟高德与腾讯对接,显示屏周边的人流量,人群质量,商圈,餐饮,可以知道这片区域投什么类型的广告;客流大数据:展示屏周边的实时客流,可以实时观测客流的情况,在相应的时间段投什么类型的广告;车媒大数据:一般装在停车场入口,来了一辆车可以识别车型,年限,金额,可以针对车型投相应的广告;媒体大数据:可以实时看到LED大屏播放的内容,媒体的位置地图展示等信息。 技术栈:SpringCloud、 MyBatisPlus、 Redis、Oauth2.0、 Dubbo、 Docker、 Nginx、Socket、Vue2 负责
1620JavaWeb框架
1.线索获取 线上:PC端⼿⼯录⼊、⼴告投放(美团、⼤众点评、⾼德地图等);线下:企微⼯具、⼩程序、兼职 ⼩程序等 录⼊的信息主要是:⼿机号、姓名、年龄、城市。⾼峰期QPS能达到1000,为了快速响应结果,先将 请求存⼊mysql异步处理创建线索,同时因为不同的线索来源,处理逻辑不同,这⾥采⽤了策略模式 2.线索跟踪、查询 线索录⼊后,定期进⾏电话回访、邀约到访、体验课预约、购买正课。每⼀条线索都有对应的跟踪记 录,同时⾼频次查询线索详细信息。基于2000万+ 的数据量,使⽤了表分区,分区键是地区id,基于 hash算法数据更加均匀。 3.智能外呼 为降低成本,集成web科天云、tQ、智⻮等第三⽅⼯具⾃动拨打电话,话术可⾃由配置。通过appid间 隔⼀定时间轮询通话记录到我们系统
1230JavaExcel开发包
1、项目的负责人,负责确定测试范围,规范测试方法和测试用例,制定bug编写规范 2、接口测试,功能测试,性能测试,编写自动化测试工具
1670数据查询
数据库稳定是最重要的,除了必要的实时监控及定期巡检,故障快速定位处理能力及性能优化能力是非常重要的。 图片截图了部分故障处理及性能诊断优化的案例。 sql性能优化做过非常多,处理过很多数据库优化器没有选择最好的执行计划的案例。
1640数据处理
数字化课堂教学辅助 80%由我编写 基于C#语言 WPF mvvm框架实现 配合硬件实现智能化课堂教学方式,多方面收集学生学习、考试情况
1010C/C++数据处理
1.使用SpringBoot进行开发,具备商品管理(商品上传,商品信息修改,商品删除,商品展示图片新增等),用户管理(用户详情查看,用户优惠劵发放等功能),商城风格修改,商城主界面图片替换,财务管理(财务数据展示,营业额,成交订单,退款订单金额,待退款订单,用户充值余额等),系统工具,开发工具(字典管理,代码生成器)等功能。 2.登录需要使用账号密码鉴权,并使用验证码进行校验。 3.完美的服务于商城,并提供了好的展示界面,数据展示方式,数据编排逻辑等降低商城后台管理人员的工作量,更加好的赋能与业务。
1490Java系统监控
项目描述:以无人机为载体,使用光电吊舱、雷达对目标进行搜索、定位。 技术架构:项目整体采用前后端分离架构;前端使用vue3, elementui框架;通过ajax访问后端数据; 后端采用go语言,采用gin框架,数据访问层通过gorm框架操作数据库,自动生成表结构、简化了表的设计。数据库采用的是Mysql数据库。 项目职责:模块开发,系统测试,系统运维 使用工具:go, mysql, goland
970地图相关
跨系统、跨业务条线,快速整合处理结构化、非结构化数据,利用大数据技术快速的整合各业务系统及相关系统的数据, 消除数据孤岛,加强内外部的数据资源的统一,建立数据共享中心,打造底层的数据资源共享平台, 为上层业务系统提供PB级的数据服务。
620Java数据处理
1、空间数据入库,处理空间MDB、GDB、SHP等空间数据导入POSTGIS 2、搭建地图模块,加载地图影像、地图服务,空间叠加分析、地图通用工具 3、搭建成果管理模块,对入库的成果统一管理 4、数据可视化大屏,按业务分类分级分析业务信息,通过可视化数据大屏进行展示 4、数据分析,根据现有业务要求,利用入库数据按要求分析,形成分析决策内容 5、数据内外网同步,平台采用单向光闸、前置机交换数据,制定数据交换标准 6、政务信息共享交换、指标模型配置、电子签章服务开发
4060Java可视化
1.. 主导后端代码编写,专注于系统稳定性与性能优化。 2. 设计并实现高效的数据库结构,确保数据的完整性和一致性。 3. 构建独立的信息体系,提供全面且高效的解决方案,满足客户的业务需求。 4. 深入与客户沟通,准确理解业务需求,制定精确的需求信息,并提供详细的 API 接口文档,以便于客户的集成和使用。 5.该项目是一个基于微信小程序的电商平台,旨在为用户提供便捷的药品购买体验。用户可以通过小程序进行个人信 息授权登录,并在商城浏览和购买药品。同时,该项目还包含一个药店ERP系统,用于药店管理药品信息和销售数据。
970Java数据处理
1.刀具磨损在线检测系统100%自行开发,项目对CNC设备采集的刀具信号进行数据清洗,后对刀具的磨损状态进行分类训练,实现深度学习的刀具磨损状况的在线检测。 2. 项目中遇到过准确率较低,模型精度不能保证的问题,最终通过优化损失函数的方法得到解决。 3. 该项目使得CNC机床的换刀可以自动化,节约了人力成本和提供了效率。
1820数据处理
在statsmodels项目中载入macrodata数据集,选择其中一些变量,计算对数差。使用seaborn中的regplot方法绘制散点图,并给出线性回归线。基于pairplot函数给出一组变量的散点图,对角线上放置每个变量的直方图或密度估计值。
1270python数学计算
对数据进行一些的处理,让数据可视化呈现,也就是数据分析,可以给客户更直观的体验,避免了单纯的数据的单板,可以让拥有一种更直观的感受
930python数据处理
本文研究了火车进站时站台安全线设置的问题。根据流体力学的粘滞定律和人体模 特测力系统,我们计算了不同距离处的空气流速和压强差,以及高铁或动车全速经过时 对站台人的“吸力”的大小。最后,我们向铁路部门提供了有关保障铁路站台安全的建 议:设置安全标志位置。 针对任务 1,通过引入粘滞定律和伯努利方程,对铁路安全标线的位置进行了理论 计算。我们考虑了流体力学的因素,包括流体的粘滞性和机械能守恒,以得出列车风和 “吸力”的表达公式。并利用现有数据,我们倒推出了湍流中的未知量,从而得出了“吸 力”的大小。我们的研究结果为铁路部门提供了有关保障铁路站台安全的建议,包括加 强安全宣传、设置安全标志和提供安全教育等。 针对任务 2,通过任务一的理论分析,进一步进行了风速随纵向压差的变化、风速 随距离的变化、不同速度下压强差随距离的变化以及压力差随距离火车距离的变化的图 像绘制。这些图像提供了直观的安全标线设置依据,有助于更好地理解流体力学因素对 铁路安全的影响。我们的研究结果为铁路部门提供了有力的参考,有助于保障铁路站台 的安全。并且我们在对 F-v 图的分析得出的结果与现行国家标准《城市轨道交通规范
1390python数据库调整和优化
当前共367个项目
×
寻找源码
源码描述
联系方式
提交