项目介绍：搭建基于hdfs存储的数据仓库，使用离线+实时精确统计预警数据，日活用户几千到几万都有，日均数据量百万级别。日均约10GB，依照维度建模理论构建ods、dim、dwd、dws及ads分层体系；数据来源于：视频监控系统，门禁系统，人脸识别系统，校园一卡通系统，图书馆系统，学校教务系统等数据通道，将数据汇总于数据仓库hdfs中，依照既定的规则进行数据分析统计，并预判学生身体心理情况，学习情况，生活情况；通过数据处理分析结果把可能有潜在泛安全风险的学生纳入到大数据监控预警中心，实时跟踪预警，防范校园安全事件的发生，保护学生身心健康，并减轻相关部门的工作量。

基于物联网、大数据、BIM+GIS 等技术，建设智慧型基建工程施工管理平台，提高基建工程安全质量风险预判能力，实现数据采集自动化、预警分析智能化，利用 SpringCloud技术，拆分模块，提供各服务的独立性，对接5G物联网，实现工地 7*24 监控预警，工地人脸识别打卡，BIM+GIS 项目 3D 模型展示，涵盖智慧大屏、实验数据第三方平台、后端管理、APP 等相关模块。 工作内容: 1、参与需求评审，配合人脸打卡机，自动化统计农民工上班天数，并配合自动定位功能，尽可能避免打卡作弊，集团财务根据人脸打卡次数，发放对应的工资，最后根据银行发放工资回单，进行比对是否有异常，解决了以往人工统计工时、比对工资异常的不确定性和偶然性，对项目进度、安全事故、工地相关指标、物联网实验数据、农民工相关指标做智慧大屏可视化展示，实时动态跟踪各模块的变化，能让管理层清晰明了的知道项目开展情况； 2、构建基础平台，搭建相关资料知识库，把建筑工地各个环节业务数据流转所用的资源串起来，实现施工留痕，事故溯源，利用 ClickHouse 做用户登录日志、预警日志、操作日志收集，实时记录每个用户每次操作的记录，发生问题能够及时找到问题根源，便于解决问题。 3、根据IOT原始消息，确认统一Kafka消息接入格式，并消费kafka消息，根据需求将时点值写入Redis，供大屏使用； 4、利用滚动窗口实时计算近1分钟、5分钟指标的极值和均值并写入Redis，反馈其达标情况并上报情况，对5分钟无上报的机器进行告警； 5、统计日/月/季维度的各材料消料量、耗电量、耗水量并将数据写入mysql，将滚动窗口内异常指标数据写入Redis、Mysql。