对南京人行最近十多年来的所有领域的支付数据进行处理和分析,大概有60亿的数据量,首先编写python 脚本实现对数据的解析和清洗,然后将处理好的数据放到Hive 进行进一步处理,之后再将数据放到GP库进行相关分析,最后能够将分析出的结果通过大屏展示
评论