个人介绍
我是程序员客栈的阿务,一名数据开发和数据分析师; 我毕业于厦门大学网络学院,担任过厦门真有趣信息科技有限公司的数据组长,还担任过三五互联,上海唐硕信息科技的网站全栈开发的程序员; 负责过不休的乌拉拉,小兵向前冲等几个游戏的数据开发,数据分析项目; 熟悉数据仓库,参与数据 ETL ,离线及实时数仓的设计及开发工作。
熟练使用 Excel 和 PPT ,熟练 Python和 SQL 语言。具有 Tableau 和 Power BI 使用和开发经验。 如果我能帮上您的忙,请点击“立即预约”或“发布需求”!
工作经历
2016-06-01 -2023-08-31厦门真有趣信息科技有限公司数据组组长
BI可视化:指导团队完成复杂的可视化报表,为130+人提供及时访问运营数据。 数据监控:对登录,充值等关键日志进行监控,及时发现运营异常或运营商网络问题,避免造成更大损失。 外部数据采集:采集玩家留言和竞品游戏运营信息,为策划提供玩家舆情信息。 周期报告:制定周报、月报分析方案,为固定模块制作定时数据清洗,确保报告及时准确。 专项报告:与策划、数值同事沟通,设计留存,活跃,付费,活动和玩法分析内容。为游戏版本制定数据分析报告,确保有针对性的分析。
教育经历
2001-09-01 - 2003-08-01厦门大学网络工商管理本科
技能
参与过销售和市场,财务报告,教育和学术研究,房地产租售等数据可视化 通过WEB 或者 Excel 表格展示结果,目的: 通过视觉呈现,复杂的数据集变得简单易懂。 促进沟通,帮助人们识别数据中的模式和趋势。 基于视觉分析的结果,做出更加明智的决策。
大数据处理:每日处理上亿级别的日志,为后续机器学习或数据分析提供数据资料,保证后续分析平台的稳定正常运行。 大数据自动化业务流程 在指定的时间自动启动任务,确保按正确的顺序执行,提供一个图形化界面,实时监控每个任务的进展情况。
采集过的网站: Bilibili, 百度百科, Boss 直聘, 豆瓣读书, 抖音, 京东, 京东商品+评论, 链家, 天猫, 淘宝, 知乎, Taptap等 技术介绍: HTTPX等网络工具,非常快速,有效地获取数据。 模拟浏览器环境(如Selenium, Puppeteer, Headless Browsers等)来进行网页数据抓取的行为。 模拟用户真实浏览器行为:模拟人的动作,比如点击按钮、滚动页面、填写表格等。 处理动态网页:有些网站的内容不是一开始就全部显示出来的,而是你浏览的时候慢慢加载出来的。这些工具可以等待这些内容加载完,然后再收集信息。 处理JavaScript生成的页面:浏览器抓取工具可以执行JavaScript,然后把这些动态生成的内容也收集起来。 通过代理IP,解决IP访问限制,够模拟真实用户行为,绕过许多基于用户行为的反爬虫机制。