元数据系统负责采集所有数据源的元信息,包括mysql, hive, kafka 等,以及数据流转的血缘关系图,数据采集依赖landsat 离线任务,定时每天采集,数据流转的血缘主要来源于landsat 上的数据开发任务,包括离线的和实时的。元数据系统并且对外提供API接口,查询相关数据源的元信息,以及对应表的上下游任务信息。
评论