首先使用python的senlenium+xpath爬取安居客的北京租房信息数据,然后使用pandas对爬取的数据进行预处理,然后使用pymysql将数据写入mysql以及hadoop大数据平台。然后使用sparksql对数据进行数据分析,将分析的指标存入mysql,然后利用flask+echares从mysql里面抽取数据进行数据分析的可视化
270pythonPython开发工具
智能营销平台产品系统
项目描述: 为银行定制化一个营销平台,业务员将营销规则输,通过客户信息和、线下渠道反馈、H5埋点数据、 营销规则,大数据自动跑出对应的客户,反馈给渠道端进行营销,同时还会跑出规则的达标率、客户重点指标跟 踪、营销效益等报表,方便业务人员判断活是否值得继续进行。 任务描述: 1.接入数据:sqoop接入MySQL数据(MySQL),文件接入渠道端反馈数据(hive),映射表H5行为明细(H Base),water drop将hive传送到clickhouse 2.模型设计:因业务需要,我们的模型设计缜密,与传统模型类似,但也有所不同,有接入层,预加工层,加工 层,应用层和接口层。其他的层级都是脚本驱动加工表,我们的加工层是脚本驱动脚本再驱动加工表。 3.批量开发:我们的批量开发运用python驱动spreak sql,完成大部分名单的开发和报表的汇总,确保第二天能 为下游提供数据 4.实时开发:对于实时性要求较高的场景,我们运用flink实现秒传,传入对应的流程化布并处理,例如当某个客 户的余额达到一定条件,我们会立刻给他下发短信,邀请他抽奖。 5.维护数据:包括调度的正常运行、数据的准
90Java金融10000.00元
该项目是环卫行业定制化研发项目,不过具有行业的通用性,适用行业可定制开发。 项目背景:一个区所有的垃圾站点,当垃圾箱满溢的时候,需要通知环卫公司派车去把垃圾拉走清运,之前采用的方式都是电话、对讲机来人工完成,除了不及时外,对工单量的统计、人员清运费用等,既繁琐又难快速均衡。 基于路况实施系统研发了一套电调系统,垃圾箱满溢的时候通过APP上报满溢订单,后台搜到订单后会根据司机端APP实时上报的GPS定位和实时路况信息,来智能派单给到对应的司机,司机通过APP端完成接单、拉箱,清运、还箱等操作(通过电子围栏限定各个操作的范围),当然后台运营系统可以在特殊的时间段切换成人工派单的模式。运营平台可以管理小压站站点(垃圾站点)、司机人员、车辆等基础信息,可以设定各个小压站站点基础清运费用,用于计算司机每天的运单数量和基础工资费用;还提供大屏展示(用于实时显示车辆作业状态和小压站点信息)。另外还设计了实时预警消息推送,涉及实时满溢订单上报、司机故障上报、订单超时上报等等,让运营人员动态掌握最新的调度情况。 该系统主要包含:运营后台、司机端APP、小压站APP、大屏展示 实现的主要技术架构:java
190Javamysql10000.00元
物业管理系统产品系统
物业管理系统涵盖了小区物业管理的全部功能模块,比如,小区管理,房产管理,业主信息管理,停车位管理,服务管理,资产设备管理,收费管理,值班管理,统计分析,等等,并且在手机端完全自适应 小区物业数字化管理,便于管理
190生活服务
1、本方案面向所有的物联网以及车联网领域,解决了车辆及终端数据的管理及控制,做到了数据透明。 2、本方案纯定制化开发,满足了客户的各方面需求,性能优越,延时低。 3、本方案使用比较通用的免费开源技术实现,包括Springboot,vue,kafka,mqtt,mysql,时序数据库等。
130Java物联网10000.00元
社会救助平台,涵盖八项民政救助事项的管理,政策资讯管理,违规预警,工作考核,统计报表等,提供PC,微信公众号,移动APP三个客户访问端口。 担任项目经理,配合商务完成招标,负责整个项目的前期立项,项目计划,需求分析,功能设计,功能开发,测试上线,客户使用操作培训及日常运维修复系统BUG。
100
数慧通产品系统
项目描述: 此系统是我们公司最终要的系统,我们公司的主要业务就是给各个金融行业卖这套这套系统。他的功能是通过前端页面的各种引擎参数配置,来实现数据同步、数据加工、数据展示。其中用到了很多大数据组件,例如数据同步用到了datax、sqoop、spark。数据加工用到了hive和MySQL,Oracle、达梦等多种主流数据库的jdbc,还有hive、spark的参数配置、资源也同步到了yarn,还有flink模块可以通过配置实现数据同步根据多家项目经验共同升级维护到现在功能强大的平台 任务描述: 1. 开发系统,根据后端传过来的配置分别流入不同的引擎,并集成拼接启动这些引擎,datax、sqoop、spark、yarn、flink等
120Java金融10000.00元
前端使用easyui,后端使用Spring+SpringMVC+Mybatis,完成小吃店铺的点餐后台管理系统 功能模块说明 1、用户管理模块:完成用户的基本信息维护及权限设置,实现按权限使用管理系统 2、店铺管理模块:完成餐桌及菜谱的配置(增删改查) 3、营业模块:完成订单的创建,修改及订单结账
250Java
湖南以财政投评信息系统统一基础数据规范、统一财政业务数据标准存储、统一应用支撑平台总账结构、统一纵向层级交换机制、统一信息安全体系五大核心要素为重心,以一体化系统和大数据中心为核心,以应用支撑平台2.0、云计算基础设施两大基础支撑和标准规范、信息安全、IT运维服务三大体系为辅助的财政信息化支撑体系。 担任高级研发,完成项目需求收集,功能设计,开发及测试,上线准备等。配合搭建公司开发平台,该项目是公司开发平台的第一个项目。
100
湖南农业担保综合业务系统实现对农业担保项目的全流程电子化管理,包括项目受理管理、项目信息管理、担保业务报表、信息查询、工作监察、资料管理、组织权限、日常任务等业务功能。 担任高级开发,业务功能开发,修改系统中存在的BUG和问题。
100
环卫行业的定制化研发项目,主要是环卫工人的作业管理,涉及到人员信息管理、排班管理、岗段管理、班次管理,签到管理、作业考评管理、月度年度统计、抽查检查、投诉处理等等。移动端采用企业微信,班组长通过企业微信完成环卫工人的签到、作业考评的提交和打分。 实现的主要技术架构:java、springboot、redis、mariadb、移动端采用uniapp
110Javavue10000.00元
项目描述: 以政务事项为场景,解决湖南省政务数据共享难的问题。明确每个单位政务事项所需要的数据,确认 供给单位所能共享的数据,确认可共享的数据将接入至政务数据中台,最后开发三清单的系统进行维护。 任务描述: 1. 前期梳理政务事项,了解政务行业。 2. 中期调研,给各单位培训、沟通、协助他们填报模版。 3. 后期开发系统,梳理业务需求,进行建模,完成后端接口。 此项目基于spring cloud+vue多模块开发,微服 务注册了本公司的权限中心和工作流模块,此系统亮点是 借鉴了政务数据中台元数据系统的血缘分系,集成图数 据库,把业务逻辑用图数据库做出可视化的效果。
120Java大数据10000.00元
BTBTC商城产品系统
多商家(多商户)电商平台解决方案,支持平台直营+多商户入驻的类京东模式和多商家店铺(平台撮合交易)的类淘宝模式,整合商家资源聚合商品能力打造商业生态圈,撮合上下游交易。 包含多种营销玩法,定制后可支持B2B、B2C、B2B2C等多种商业模式,配合丰富的社交功能,帮助商家降低获客成本,提升用户转化率。 多商户商城系统源码集客户关系管理+营销电商系统,能够真正帮助企业基于商城微信公众号、多商户商城小程序、WAP等,实现会员管理、数据分析,精准营销的电子商务管理系统。可满足企业新零售、批发、分销、预约、O2O、多店、商铺入驻等各种业务需求。
180生活服务
能效管理平台产品系统
1.项目描述:能效管理平台是一种现代化的管理工具,用于监控、管理和优化能源消耗。通过实时数据收集、分析和报告,能效管理平台能够提供有关能源使用情况的详细信息,从而帮助组织机构实现能源成本降低、减少碳排放并提高可持续性。 2.责任描述:在项目中,负责平台的整体框架搭建,开发设计,技术选型研究,以及领导团队进行产品的开发工作。 3.技术应用:vue作为前端开发框架,Echarts用于数据可视化,AntvX6绘制拓扑图,引入公式编辑器进行数据结构和算法设计,Springboot作为后端开发框架,redis用于数据缓存,mqtt消息中间件进行数据采集,以及Mysql、时序库作为主要的数据库系统。
190Java能源
量化交易系统产品系统
前后端均使用Python代码开发,加密后构建为exe执行文件 系统可以帮助交易者提高数据分析的能力,快速验证自己的盈利模式 作者简介:毕业于山东医大; 职业历经:信雅达、巴克莱、IBM、摩根士丹利 创业经历:汽车科技公司、私募基金技术合伙人
60python金融10000.00元
【一点工作室】 工作室可承担unity代做相关,可接受VR/MR系列、2D/3D游戏开发系列的程序,场景,模型整包业务、可接受3D场景搭建,3D角色道具模型制作业务。 工作室成员来自龙图游戏,华为,搜狐畅游,具有专业的软件技能开发素养。 工作室目前已成功向客户提供下列种类的产品案例:3D游戏、VR交互、MR大空间、3D场景/模型
100企业服务
1.面向高校实验室,科研机构。提高试剂管理效率,增强试剂安全性,实现试剂全生命周期追踪等 2.通过安全性、智能化、高效性、灵活性、合规性和人性化设计,解决了试剂存储和管理中的痛点。 3.Java Spring Boot, mysql, redis
90Java教育10000.00元
在线考试系统产品系统
1、可设置管理教师、设置教师账号的基础信息、个人密码、角色权限设置 2、可自定义设计试卷、试题,包括设置试卷的标题、试题题目和题型、答案设置 3、参加考试完成后,提供阅卷和批改 4、使用java1.7编译,springmvc+mybatis+mysql8,需要使用tomcat7部署
240Java教育1000.00元
1. 一款专为小微企业定制的进销存管理软件,支持外设硬件、打印机等,数据统计输出专业报表; 2. 核心功能:多行业垂直细分、多人协作、实时库存、扫码找货、会员管理、手机打印、快捷对账、经营统计等; 3. 专业完善的行业解决方案,多端数据同步,数据安全,实现不同行业的定制化开发; 4. 强大的后端和客户端能力,使用微服务架构,集成内购、硬件设备、混合开发等技术。
150Java
电商数据仓库产品系统
通过flume和sqoop数据采集工具,采集文件日志中的用户行为数据和数据库中的数据到hdfs 文件系统。然后到基于hdfs文件系统构 建外部分区表,建立总体的数据仓库框架。数据仓库 ods层直接保存原始数据,dwd层对数据进行一些预处理,dws层保存一些中间 层数据用于 app层数据调用。在数据仓库上完成相关指标统计,例如新增用户统计,用户流失统计,操作系统活跃性,商品指标信息 的相关指标。
100Java大数据
当前共158440个项目
×
寻找源码
源码描述
联系方式
提交