先说一下我要做什么:为了解行业老大做线上手游陪玩业务的基本情况,想通过他们在app提供的月排行榜的数据,做初步营收相关的数据分析。
作为万能的产品经理,不懂技术和代码也一样可以数据抓取。
准备工作:
- 百度、bing必应
- charles或者其他的app抓包工具
- excel
- sublime(可以做一些基本的批量处理,没有也可以)
1. 获取源数据
大部分app中使用https链接,所以正常使用charles抓包之前,先安装描述文件。不然会出现乱码(先百度“charles教程”和“charles https 抓取”这几个关键字)
在抓到的URL中,选择json格式,我们需要的东西就在这里面,保存到sublime中内容如下(不知道这玩意要不要打码)
这里面更多的东西是跟我无关的,我需要的字段有这些:
nickname 用户昵称property_value 游戏段位
gender 性别(1=男;2=女)
birthday 生日
city_name 城市
price 单价
nickname 昵称
order_count 订单量
跟这些没关系的统统过滤掉(工具:sublime、excel)。
汉字在 json 中显示的是 UNICODE 编码(别问我这是啥,我也不认识他),所以还需要把 UNICODE 编码转换成汉字,所以请百度“UNICODE 编码 转换”。
经过上面的工具,把得到的结果放到excel里面,得到如下内容:
至此,抓取过程结束。然后对数据进行加工。
爱盈利(aiyingli.com)移动互联网最具影响力的盈利指导网站。定位于服务移动互联网创业者,移动盈利指导。我们的目标是让盈利目标清晰可见!降低门槛,让缺乏经验、资金有限的个人和团队获得经验和机会,提高热情,激发产品。