大数据

惠农网行，农产品全国价格行情，农产品全国资讯，农产品产地数据分析 独立网站开发，支持seo搜索需求，支持图表数据分析，独立业务。

项目背景： 监控报警系统是对服务器集群日志监控、告警全生命周期管理的系统，具体对服务器集群输入的命令、操作的文件、登陆状况三大快日志进行监控、统计、告警。 项目技术点：Django、Celery、asyncio、Mysql、redis、bootstrap 项目职责： 1、实现了仪表盘页面对数据进行统计汇总展示； 2、实现了用户相关功能，比如用户登陆、用户管理、用户日志展示； 3、实现了告警设置相关功能，比如命令告警规则设置、黑名单登陆告警设置 4、实现了各类监控数据的分类统计展示、查询、导出； 5、实现了各类告警信息的统计图标展示，比如ssh登录、危险命令、蜜罐数据； 6、实现了报表的统计和生成，比如自定义生成报表、日报、周报、月报； 7、负责整个前端系统的管理，更新迭代； 项目产出： 1、成功部署上线了监控报警系统

有自然语言处理和推荐系统相关的算法落地和业务运行经验; 熟练掌握Python数据分析相关技能 了解Requests、Regular Expression、BeautifulSoup4、XPath等数据爬取工具

企业内部数字化报表平台 数据中台系统负责源数据提取，数据清洗（遵守清洗流程ODS-DW-DM），数据发布，数据展示系统负责可视化呈现，多维度报表，驾驶舱展示等。 我负责数据脚本开发，清洗流程配置，数据发布，报表开发等。

1、负责整个项目框架的搭建； 2、负责全部UI布局开发，接口联调，上线迭代等； 3、通过微信小程序蓝牙功能与心率手环进行交互设置，从手环接收数据上传到服务器并生成检测报告反馈给用户； 4、活动预约、登录注册、设备连接、数据接收、数据上传等功能；

项目简介：数据分析平台由四大系统组成，数据分析系统：灵活的自助分析、画像分析、人群管理、数据源管理等功能；埋点管理系统：埋点的统一管理和校验等功能；标签画像系统：标签的元数据管理，标签画像分析，和运营人群圈定管理等功能；指标管理系统：负责业务指标的统一定义，逻辑说明，和相关的库、表、字段关联信息。 涉及技术：SpringBoot + MySQL + Redis + impala等 任务描述： 1.自主分析系统分析功能包含多维分析、漏斗分析、提取分析等功能，主要是通过抽象的对象转化为ast语法解析树，将解析树再转化为相应的sql提交到impala集群进行准实时分析、kudu进行实时分析、hive中进行离线分析。 2.埋点系统主要完成定义上报的事件定义以及事件维度定义管理；标签系统元数据包含标签数据定义，以及人群包推送所需标签圈定人群功能等；指标则定义指标的元数据以及计算口径（大数据的库、表、聚合方式等）；自主分析平台通过事件、维度、指标、人群等对数据进行分析提取。 3.进行系统优化，接口优化（缓存），慢查询优化（批量sql、去掉函数、预计算），内存优化（多线程大对象）。

项目职责： 负责短信业务模块和大数据分析报表功能的开发和设计和管理，短信主要基于cmpp协议 后端使用 java8、springboot、springcloud、mybatis、kafka、redis、mysql,hadoop,hive,spark,hbase 等,前端 PHP+JS 开发。 主要模块简介: 该平台主要用来完成公司的短信营销业务及 AI 语音电话的营销，主要模块有：短信业务，数据报表，黑名单管理，数 据出库，数据入库，数据处理，数据建模，自动撞库等模块。 项目描述： 数鸣信天翁 CRM 平台是集成了短信发送，大数据处理，数据入库的综合性管理平台。 该平台所有的业务模块都是为了客户营销服务，营销的方式主要通过手机短信和 AI 电话。首先公司通过在运营商那里的数据建模获取要营销的客户数据，比如信用卡，会从运营商那里通过算法和建模获取意向的客户数据，数据回来后通过数据入库模块进行数据处理， 将数据分运营商和建模源存入到大数据平台,这部分主要通过 hadoop 和 hive sql 实现，使用策略模式分不同的数据源进行处理入库， 如山东移动，北京联通等。数据入库之后运营通

零感网御物联网安全平台： 1、终端、哑终端准入接入（集群接入Radius管理） 2、多层数据筛选与接入（集成硬件端、终端拨号、隔离区、安全区） 3、终端地址、ip、行为记录，集成大数据行为分析，对终端安全预测与预警 4、监控平台（异常行为记录与统计、实时隔离异常终端、设置白名单与异常区）

项目内容： 该项目名为“区块链+电子发票”商户平台及税务局“信用+风险”系统，在现有的“区块链+电子发票”平台进行升级部署。项目分为三个独立子系统，每个系统的实现和部署方式不同，子系统主要分为：A.手机开票终端；B.发票风控系统；C.商户服务平台。 （1）发票风控系统 建立发票风控管理制度，连通商户服务平台以及金税三，建立事前、事中、事后的监管过程，以大数据技术来完善现代化监管能力，分析特定的交易数据突变现象来控制风险，利用移动技术搭建商户发票管理应用。建立风险指标体系、风控定时扫描、风险一键集成，形成7*24小时的管控机制，只要开票，触发指标，即可监控。 （2）区块链开票场景应用-手机开票终端 针对现有开票系统的优化升级，为商户提供更便捷的手机端开票解决方案，商户利用微信经过认证即可开通，实现移动端的开票系统管理。商户可以通过该系统随时审核开票信息，提供发票管理中的相关操作，同时可以查看开票数据相关统计。 （3）商户服务平台 为优化营商环境、方便消费者索取发票、降低商户开票门槛，同时方便税企互动。系统基于微信小程序搭建，分为消费者、商户、服务商应用部分。 消费者使用小程序，扫商户码即

该大屏数据展示主要分为资产规模、理赔数据汇总，主要事故成因分析，投保险种分析，集团资产规模，挽回损失金额等模块。 使用者根据该数据进行汇报演示，以及后期进行了系统嵌入，可长期维护使用。 主要负责整体的大屏数据开发，采用echarts，加入了折线图、饼图等可视化图标展示。 并且加入了地图展示以及地图下钻查看等功能，用户可以通过全国地图查看整体数据，也可进入下级省份查看省份数据等。

智慧城市视频融合指挥调度平台以新发展理念为引领，面向高质量发展需要，借助AR实景增强现实、二三维地理信息、AI人工智能、物联网和大数据等先进技术对城市高空监控+AR鹰眼+低点位视频+无人机视频等进行视频融合后对城市普通事件和应急事件进行综合处置管理，提升城市事件综合管理能力，最终实现“所见即所得”的城市精细化管理。 同时通过对不同类别、不同事件单位数据的及时统计，并进行比对分析，为事件态势决策支撑提供有力的数据支撑。 主要模块： 智慧城市驾驶舱 融合城市所有事件进行综合大数据统计分析与决策管理。 视频融合指挥调度 融合 “高空监控”+“AR鹰眼”+“低点位视频”+“无人机视频”来综合提升城市事件管理指挥调度能力，对城市事件和应急事件进行联动展示，为应急事件指挥调度提供可视化支撑。 事件预警上报 全景AI事件自动预警上报+人工巡查事件上报管理。 移动端 嵌入一卡通APP支持用户认证登录、相机远程实时查看城市综合管理与城市事件综合统计分析决策。 视频基础能力 支持视频移动放大操作、联动长焦镜头查看远处局部细节画面、画质增强、全景视频录像等管理。 后台配置管理 主要实现对用户权限角色、设备资

软件功能: 1. 项目管理 -> 多工地维护, 完整的开发周期配置, 监理人, 硬件归属 2. 设备管理 -> 管理已接入的硬件设备, 并实时监控硬件状态, 包含海康摄像头, 塔吊, 喷淋, 扬尘, 进出口人脸识别闸机等设备 3. 劳务管理 -> 工地劳务人员的管理, 并配合进出口闸机实现劳务人员的考勤统计 4. AI盒子 -> 对摄像头视频流的AI算法识别, 包含佩戴安全帽, 反光衣, 抽烟等场景的识别 5. 数据大屏 -> 结合第三方数字孪生的可配置数据大屏, 接入地图功能实现项目整体的可视化统计数据 6. 统计管理 -> 主要针对硬件设备, 环境数据的统计 7. 小程序 -> 劳务人员使用小程序能查看项目的一些信息, 环境,硬件数据以及硬件控制等 参与模块: 整个项目开发周期一年左右, 人员组成为大屏UI设计, 1名前端, 2名后端, 我完全参与整个项目的生命周期, 包含需求讨论, 前后端小程序端全站开发, 第三方接口对接等

智慧海防项目上普通存在海岸线长、港口码头多、渔船民复杂，沿海管防工作长期面临严峻挑战。 在反偷渡、反走私、海上疫情防控的主战场上，智慧海防坚持“打防结合”、“人防+技防”为破解海防工作难题进行“科技+海防”的实战应用。 整体海防监控核心功能如下： 功能如下： 1，视频监控进行重点观测，支持画布式移动、放大、缩小等漫游操作。 2，调用AIS/雷达数据实现全景球机地图三联动。 3，支持地图实时搜索MMSI定位功能。 4，接入船舶数据实现实时电话视频调度。 5，支持AI事件与人工事件即时上报预警功能。 6，支持船舶轨迹回放。 7，支持视频回放辅助事件处置管理。 8，后台人员管理、权限管理、事件管理、地图管理、设备管理、标签管理等。 负责整体项目管理、需求调研、PPT解决方案设计、原型设计、开发推进等工作。

1.该项目是面向新经济新业态自由职业者的综合保障服务平台，提供佣金结算、个体集群注册、开票报税、商事管理、灵活派遣等综合咨询及信息化专业服务。对接了多个行业巨头，每日承受高访问量和高负载，年流水达200亿。系统拆分为20余个高可用微服务模块，主要有客户管理、发票管理、申报管理等模块。 2.我在该项目中主要完成发票拆分和账单识别功能，其次参与了风控微服务升级和日志埋点的开发。在发票拆分功能的开发中，我通过迭代器、策略、责任链模式实现多种场景下使用不同的账单拆分逻辑，满足多种场景的发票拆分需求，同时保持了代码良好的可读性及拓展性。在账单识别中，运用了阿里云OCR能力，结合RocketMq消息队列实现高可用的账单识别服务，大幅减少运营人员人工操作。在风控微服务升级中，采用AB发布模式逐步升级服务，保证业务可用性同时完成技术改造。日志埋点使用Disruptor无锁队列技术，高效完成系统日志记录与上报。 3.在项目开发过程中，我们曾遇到OCR识别时间过长的问题，通过RocketMQ分发任务，由多实例进行分布式并行消费，并采用多线程进一步优化批量图片处理服务，将耗时优化到20分钟，效率较原来提高1

项目背景： 为了更好的建设和运营鄂州机场，依据机场的飞机、车辆、货物等真实的运行轨迹数据虚拟出来，并通过对数据的分析，对业务的运营提供解决方案 项目技术点：Flask、Linux、mysql、kafka、pandas、git 项目职责： 1、分析车辆调度算法所需涉及的数据，并将飞机、车辆的数据进行数据处理写入mysql 2、创建车辆调度算法模型，部署算法模型、模型联调测试、分析算法模型的分配结果 3、优化红绿灯算法模型，将模型应用到多个机场红绿灯场景 4、编写Flask、git、算法部署的使用文档并在组内展开培训 项目产出： 1、规范组内的开发规范，提升了组内人员开发能力 2、实现了车辆调度算法从0到1，解决了人工分配车辆，将车辆分配的效率提升30% 3、解决了机场道路红绿灯处的通行效率，将通行效率提升了10%

 项目简介：可视化大屏，使用可视化数据展示分析，对货物分析，金额分析，站点分析，更直观展示  用到技术：vue, echarts，dataV

模拟丁香医生和腾讯实时疫情数据的页面，展示出实时疫情数据 将数据通过表格、曲线、地图等多种方式进行可视化展示，使得表现更加直观 使用springboot mysql mybatis redis echarts等技术栈

项目名称：水质监测平台大屏开发 项目描述：本项目旨在为客户提供一个用于监测水质的大屏平台，以便他们可以实时监测水质状况并采取必要的措施。该平台涵盖了多个功能，如数据可视化、实时监测、历史数据查询和用户权限管理等，旨在为客户提供全面的水质监测解决方案。 负责内容： 与客户沟通需求，了解他们的需求并提供相应的解决方案； 设计平台的架构，包括前端界面、后端数据存储和处理、数据库和用户权限管理等； 使用Vue3和TypeScript等技术开发前端界面，实现数据可视化和实时监测功能，并设计用户权限管理系统； 使用Echarts和WebSocket等技术实现实时数据可视化和实时监测功能； 与团队成员协作，完成整个项目的开发和测试。

闻海大数据Saas是北京闻歌面向未来的舆情风控大数据平台，提供了海量数据搜索，及强大的数据分析能力，大屏展示能力等

随着企业精确化管理程度的不断加强，对投资管理的精确性、规范性和执行效率等要求越来越高。因此需要通过加强工程项目建设全过程中设计投资和项目管理的信息化集成，巩固信息透明共享、分权分级分域分类管理、专业数据分析统一等手段来应对，并在此基础上提高投资管控和项目管理的整体水平，满足全集团各层级的管理需求，充分体现投资管控和工程建设管理理念。 精准投资：深化投资全过程跟踪和执行管控，强化总量、投向、立项和结转管理，支撑投资分析与评价，提高投资效益，防范投资风险。 高效建设：持续流程优化、改进、创新，快速满足不同投资需求对建设管理的需要，高效率完成工程建设，高效益实现投资目标。 数据统一：规范基础数据，加强规划、计划、建设各阶段管理的规范性，确保投资管控全流程的口径统一，提升全集团整体项目管控能力。 主要包括： 1、固定资产类项目管理 实现根据项目清单获取建设需求，并按照工程建设程序完成工程实施，包括工程进度、造价、质量、安全的管理。按建设内容实现建设需求、可研立项、项目设计、项目施工、项目验收、项目决算、项目归档等建设流程的管理支撑。 2、股权投资类项目管理 推动股权类项目的全生命周期管理，实现