系统架构: Hadoop+Zookeeper+Hive+Flume+Kafka+Storm+Redis+Sqoop+ELK+INFRA+Jupyter1. 参与调研和讨论各组件版本的选择;2. rpm包命名及包目录结构定义规范;3. 编译大数据基础组件成rpm包;4. 与Ambari进行集成,编写stack;5. 负责数据的流转、数据清洗以及任务开发6. 负责单点登录功能的开发;7. 负责数据可视化支持分支功能、数据明细、分享、菜单权限等功能开发;8. 数据服务-支持多数据源;9. 数 据 主 题 - 支持多数据源 ;10. 负责维表join以及双流join开发声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态
评论