百度内部数据中台

我要开发同款
headmaster12023年10月19日
97阅读
所属分类数据治理、数据分析、大数据

作品详情

这个系统是作者之前在百度工作时,所做的百度内部的一个数据治理平台,用户可以将自己的数据放到平台上进行管理,在数据地图上进行发布,供需要相应数据的人申请,再进行后续的数据消费(API拉取数据,使用平台的可视化报表工具制作成报表等)。

系统的主要功能:
1、数据集、数据表的管理、维护。
2、数据集的发布。
3、数据查询API。
4、可视化报表工具。

系统主要技术栈:
开发语言:后端使用Java语言开发。
开发框架:后端基于Springboot微服务框架,前端H5页面基于Vue。
数据存储:主要业务数据使用MySQL数据库,部分高频访问数据缓存在Redis中。
其它中间件:使用了消息队列Kafka。

我的主要工作:
我是这个系统的技术负责人,负责系统的后端架构设计(在百度工作时,我是开发这个产品的团队的后端leader,实线带十几人)以及可视化报表工具的后端开发工作。可视化报表工具包括数据建模、生成各种可视化图表(柱图、折线图、饼图等二十多种图表展示)、多维分析功能(数据下钻、钻透)等。

因为写这个项目时手头暂时没有作品的图片,所以下面的作品图片不是真实的,等作者找到后再更改成真实图片(作者已从百度离职,无法马上找到作品原图片,而程序员客栈系统要求必须上传图片)。
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论