SmartDataStack

我要开发同款
一个靠谱的程序猿2024年11月15日
204阅读

作品详情

项目主要包含以下功能:
1. 自动收集11个线上Hadoop集群的基础信息,包括最新的版本、配置文件、HBase表详情、HDFS目录详情、支持的服务等信息,以供用户与DBA快速查阅;
2. 监控HBase性能数据,并通过计算得到表的大小增长速度、读写速度、Region分布等信息,以协助用户与DBA快速定位问题;
3. 提供用户自助提交HBase DDL以及HDFS目录操作脚本的功能,系统通过语法检查、规范检查、权限检查、传染性检查、审批、限流、定时等手段在保障安全的同时,替代了原本的用户通过邮件交互提交需求的流程,为用户与DBA至少提升效率在90%以上;
4. 根据用户的提交的脚本,自动分析关联表与项目之间的关系,为传染性检测生成参考数据;
5. 提供插件功能,DBA可自定义可运行工具程序,系统会自动解析配置文件,并生成对应的表单界面以供其快速操作;
6. 项目管理、邮件管理、用户管理、权限管理等功能

项目主要基于Spring、Spring MVC、MySQL、SQLServer等技术或框架开发;

该项目自上线以后,使原先需要DBA协助的关于Hadoop相关的工作降低了90%以上,并获得公司2017 Q1优秀项目。
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论