实时数据计算平台

我要开发同款
寇先森一直在进步2023年05月10日
139阅读
所属分类实时计算、springboot、kafka、大数据、Flink

作品详情

实时计算平台 规范了项目的配置,鼓励函数式编程,定义了最佳的编程方式,提供了一系列开箱即用的Connectors,标准化了配置、开发、测试、部署、监控、运维的整个过程, 提供了scala和java两套api, 其最终目的是打造一个一站式大数据平台,流批一体,湖仓一体的解决方案
功能如下:
Features
开发脚手架
多版本Flink支持(1.11、1.12、1.13、1.14、1.15)
一系列开箱即用的connectors
支持项目编译功能(maven 编译)
在线参数配置
支持Application 模式, Yarn-Per-Job模式启动
快捷的日常操作(任务启动、停止、savepoint以及从savepoint恢复)
支持火焰图
支持notebook(在线任务开发)
项目配置和依赖版本化管理
支持任务备份、回滚(配置回滚)
在线管理依赖(maven pom)和自定义jar
自定义udf、连接器等支持
Flink SQL WebIDE
支持catalog、hive
任务运行失败发送告警邮件(支持钉钉、微信、邮件、飞书等)
支持失败重启重试
从任务开发阶段到部署管理全链路支持
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论