该项目主要通过统计和整合市民数据和工作单位的数据,能对行业类型、人员学历分布、区域收入水平分布、家庭收入水平分布等进行深度分析,为统计局提供事务工作的数据支持。我在项目中主要负责使用Kettle工具进行源数据抽取和数据标准化,同时编写自定义函数和存储过程进行数据处理,并使用ETL工具将数据从ODS层抽取到DWI层中,最终完成了高效的数据流处理和可视化报表的生成。
评论