个人介绍
作为全栈RPA开发工程师,我拥有丰富的跨领域技术栈,熟练掌握前后端开发,精通大数据处理、数据库管理以及爬虫技术等。在过往项目中,我参与RPA全面业务流程自动化革新项目集,运用RPA提升审批效率,确保数据准确性,通过RPA技术改造供应链、生产、财务、客服等多个业务领域,显著提高运营效率,降低成本。我还参与构建了ImageMatchPro - 自动化图像识别与处理平台,利用深度学习与移动端应用,实现病害的精准识别与实时反馈,助力农业智能化。在图像识别与处理软件ImageMatchPro项目中,我运用Python、VGG16模型、灰度图处理及RPA技术,实现相似图像的自动化检索与识别。此外,我还打造了企业级大数据洞察平台BizInsights,结合Python爬虫、Hadoop生态与Flask前端框架,实现数据的实时采集、清洗、分析与可视化展示,赋能企业数据驱动决策。我的优势在于深厚的技术底蕴、广泛的项目经验以及出色的业务理解能力,能够灵活运用多种技术手段,为客户提供高效、精准的自动化解决方案,助力业务流程优化与智能化升级。
工作经历
2021-06-01 -至今广西宏道信息技术有限公司售前支持
1、负责系统及相关软件开发的需求分析及架构设计; 2、对系统及相关软件开发的整体系统架构负责,对系统安全性设计负责,开发及相关设计文档编写; 3、负责相关请求的技术分析,负责制订相关的技术解决方案; 4、参与制定设计及实现规范,指导设计、实现及部署工作; 5、配合项目经理进行技术决策,进行技术风险评估; 6、负责对软件开发团队的技术指导。 7、负责对整个开发团队的能力建设和技术培训工作
教育经历
2019-09-01 - 2021-06-01广西机电职业技术学院大数据专科
技能
Flask框架应用: 使用Flask构建响应式Web应用程序,提供用户友好的交互界面。 数据大屏设计: 制作动态、可视化数据大屏,直观展示关键指标、趋势分析与异常预警。 实时数据更新与推送: 实现数据流处理(如使用Kafka或Spark Streaming),确保前端界面数据实时刷新,及时反映业务变化。 项目行动: 企业数据爬虫定制: 分析目标数据源特性,编写Python爬虫脚本,集成反爬机制规避策略,确保数据采集的稳定性和合规性。 大数据基础设施建设: Hadoop集群部署: 安装配置Hadoop HDFS、YARN,确保集群稳定运行与资源高效调度。 HBase集群安装与配置: 设置HBase RegionServer、ZooKeeper等组件,优化表设计与分区策略。 Hive数据仓库搭建: 安装Hive Metastore,创建数据库与表结构,配置Hive与Hadoop、HBase的连接。 数据清洗与预处理作业开发: 使用MapReduce或Spark编写数据清洗脚本,执行去重、缺失值填充、数据类型转换等操作。 数据分析与模型构建: Hive SQL查询与视图创建: 编写复杂查询语句,生成汇总统计视图,用于前端展示。 机器学习模型训练: 应用Spark MLlib训练预测模型,如销售趋势预测、客户流失预警等。 Web前端与数据大屏开发: Flask应用开发: 构建路由、模板、控制器,实现用户登录、权限管理、数据请求等功能。 数据可视化设计: 使用ECharts、D3.js等库制作动态图表,展示KPI趋势、地域分布、热力图等。 实时数据流处理与推送: Kafka或Spark Streaming集成: 配置数据流管道,对接爬虫新采集数据与前端实时更新需求。 WebSocket接口开发: 实现前后端长连接通信,实时推送更新数据至前端界面。 项目结果: 全面、实时的企业数据采集: Python爬虫成功抓取了客户关注的各类企业内外部数据,确保了数据的全面性与更新频率。 高效、稳定的大数据处理平台: Hadoop、HBase、Hive等组件组成的集群架构,有效应对海量数据存储、处理与分析需求,显著提升数据处理效率。 深度、直观的数据洞察: 数据大屏清晰展示了企业的核心KPIs、市场趋势、风险预警等关键信息,帮助企业快速理解业务现状,支持数据驱动决策。 用户友好的交互体验: Flask构建的Web前端界面提供了流畅的用户体验,用户可轻松定制关注指标、筛选条件,实时查看数据动态。 实时数据更新与响应能力: 通过实时数据流处理与WebSocket推送技术,前端界面数据实现秒级更新,确保企业能够及时响应市场变化。 综上所述,BizInsights项目成功构建了一套基于Python爬虫、Hadoop生态、Flask框架的大数据处理与可视化平台,实现了对企业海量数据的高效采集、深度分析与实时展示。该平台为企业提供了全方位、实时的数据洞察,有力推动了企业的数字化决策与运营优化,获得了客户高度评价与持续使用。
灰度图处理与特征提取: 实现灰度图转换算法,结合VGG16模型提取图像的深层特征向量,确保特征表示具有良好的区分度。 相似图像检索系统开发: 建立高效的索引结构和检索算法,根据输入图像的特征向量快速查找相似图像。 RPA自动化控制模块开发: 配置RPA流程,自动触发图像上传、下载、识别、检索等一系列操作,并将结果推送至前端供业务人员审核。 系统集成与部署: 将上述组件集成到统一的软件平台上,确保其在云端服务器稳定运行,与前端界面无缝交互。 项目行动: 前端UI设计与开发: 使用QT等技术设计清晰、直观的操作界面,实现图像上传、参数设置、结果展示等功能。 VGG16模型封装与优化: 将预训练的VGG16模型封装为Python库,进行模型微调以适应特定业务场景,优化模型推理速度。 灰度图处理与特征提取模块开发: 编写Python代码实现图像灰度化处理,利用VGG16模型提取特征向量,并实现特征向量化存储与检索。 相似图像检索系统构建: 采用倒排索引、余弦相似度等技术构建高效检索系统,确保在大规模图像库中快速定位相似图像。 RPA流程设计与配置: 使用RPA,设计自动化流程,包括图像批量上传、识别请求发送、结果接收与前端展示等步骤。 系统集成与云部署: 后端服务开发: 使用Python开发后端API,与前端、RPA流程及数据库进行交互。 数据库设计与管理: 设计符合业务需求的数据库redis、MySQL等,存储图像元数据、特征向量、检索结果等信息。 云服务器配置: 在云平台上部署后端服务、数据库及RPA机器人,确保高可用性和可扩展性。 项目结果: 用户友好且高效的前端界面: ImageMatchPro提供了直观易用的Web界面,业务人员能便捷地上传图像、设置参数,实时查看识别结果,极大地提高了工作效率。 精准的图像识别与检索能力: VGG16模型与灰度图处理技术的结合,使得软件能准确提取图像特征,实现高精度的相似度识别,即使在复杂背景下也能有效区分相似图像。 自动化工作流程: RPA技术的应用实现了从图像上传到结果推送的全自动化流程,显著减少了人工干预,确保了24/7的不间断服务。 大规模图像处理能力: 系统具备良好的可扩展性,能高效处理海量图像数据,满足大规模业务场景需求。 业务价值与用户反馈: ImageMatchPro软件在版quan保护、商品比价等行业得到广泛应用,帮助企业大幅降低了人工审核成本,提升了图像处理效率。用户反馈显示,该软件显著提高了业务处理速度和准确性,对侵quan行为的发现率提高了80%,用户满意度达95%以上。 综上所述,ImageMatchPro项目成功开发了一款基于Python语言、前端用户界面、RPA自动化控制技术,以及VGG16模型和灰度图处理的图像识别与处理软件。该软件实现了相似图像的高效检索、精准识别与自动化处理,为业务人员提供了强大的工具支持,显著提升了相关业务领域的运作效率与准确性,得到了市场的广泛认可。
供应链管理: 自动化采购订单处理、供应商信息更新、库存数据同步、物流跟踪报告生成等流程。 生产运营: 实现生产计划排程数据导入、物料需求计算、生产数据统计与报告自动化。 财务管理: 应用RPA进行应付账款处理、应收账款催收、费用报销审核、财务报表编制等工作。 客户服务: 自动回复常见咨询、订单状态查询、投诉处理初期信息整理、SLA监控与提醒等。 集成与协同: 确保各子项目产出的RPA机器人能够无缝集成到现有IT环境中,数据交互畅通无阻,并能协同工作,避免孤岛效应。 变革管理与培训: 实施组织变革管理计划,包括员工培训、角色调整、新工作模式推广,确保员工适应自动化环境,充分利用RPA释放的时间进行更高价值工作。 项目集行动: 流程审计与优先级设定: 成立跨部门流程改进小组,运用业务流程建模工具,对全公司业务流程进行全面梳理,形成自动化候选清单,并基于ROI、风险等因素确定实施顺序。 项目集组织与协调: 设立项目集办公室(PMO),负责整体项目集的规划、协调、监控与控制,确保各子项目按计划推进。 RPA平台选型与标准制定: 通过市场调研、产品演示与POC测试,选定统一的RPA平台供应商,同时制定详细的RPA实施指南、安全管控措施和代码审查标准。 子项目分阶段实施: 各子项目团队按照敏捷项目管理原则,进行需求分析、设计、开发、测试、部署与持续优化,确保RPA机器人精准执行指定任务。 系统集成与数据互通: 开发必要的API接口和中间件,确保RPA机器人能与ERP、CRM、SCM等核心系统无缝对接,数据流转顺畅。 变革管理与培训活动: 组织系列培训研讨会,讲解RPA基础知识、操作技巧及新工作模式;开展角色转型辅导,帮助员工适应新的职责分工;通过内部宣传,强化自动化带来的业务价值认知。 项目集结果: 效率提升: RPA项目的实施显著提高了各业务领域的处理速度,如订单处理时间缩短了60%,发票校验准确率提升至99.8%,库存数据更新实时性提高90%以上,报表生成时间从数小时缩短至几分钟。 数据准确性与合规性增强: 自动化减少了人为错误,确保了数据一致性与准确性,同时内置的合规检查规则降低了法规遵从风险。 业务敏捷性提升: RPA机器人能够快速适应业务规则变化,使得公司能够更快响应市场动态和客户需求,增强了竞争优势。 员工满-意度与创新能力提升: 通过自动化解放员工双手,使其得以专注于更具创造性与战略意义的工作,员工满-意度调查结果显示,参与RPA项目的部门员工满yi度平均提高15个百分点。 成本节约与投资回报: 经过成本效益分析,项目集在实施后第一年内即实现了超过200万元的成本节省,预计投资回报期为18个月,远低于预期。