基于SpringCloudAlibaba、filnk、tidb、dbswitch、neo4j等构建,结合了实时计算和离线计算两种场景的需求。 flink在实时计算方面表现出色,能够处理高速数据流并支持流批一体化处理。tidb则作为高性能的分布式数据库,具备强大的海量数据处理能力。 同时,dbswitch负责离线数据的同步计算,支持多种主流数据库。此外,我们采用neo4j构建图数据库,以高效的方式处理复杂的关联数据。
包含数据集成,数据开发,数据治理,数据资产,数据服务,数据集市六大模块,解决数据孤岛问题,实现数据统一口径标准,自定义数据开发任务,解决数据孤岛问题:通过统一的数据管理和整合,打破信息壁垒。 统一口径标准:确保数据的准确性和一致性。 自定义数据开发任务:满足企业特定的数据处理和分析需求。 高效的数据处理能力:flink和tidb的结合使得数据处理速度更快。 支持多种使用场景:无论是实时计算还是离线计算,都能得到满足。 提供全面的数据服务:从原始数据到个性化报表,满足各层次的数据需求。