数据中台

我要开发同款
proginn15173557322025年02月24日
12阅读
开发技术vue、zookeeper、docker、postgres、java
所属分类大数据

作品详情

1、针对项目需求进行开源系统选型,极大节省自研开发和迭代升级成本,缩短开发周期。2、逐一了解分析相关产品源码及框架,以保证二次开发可行性和可扩展性,并根据架构明确开发难度。3、将选型产品进行本地源码部署,并统一整合到jnpf低代码平台,根据UI原型,二次开发各产品的web端统一风格。4、分配功能测试案例,验证各模块功能准确定和稳定性,通过并发压力测试了解openAPI和数据处理能力,并针对源码bug进行改造修复,其中修复sqlrest、datavines产品对PostgreSQL支持的问题,并提交issues和分支。5、完成合产品与jnpf的单点登录、流程贯穿整合,实现从数据建模、数据开发、元数据管理、数据质量管控、数据API的数据库流程建设。6、目前平台已介入28家self区的数据库,和中央数据湖作为数据支撑,通过集群搭建dolphinscheduler,稳定运行600+ etl任务,日批处理上千亿数据量,为数据数据仓库分压一定的数据分析及数据监控压力;同时基于self区库表在线生成API提供数据接口,搭建门户和报表等场景应用
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论