爬取抖音数据实战

in 爬虫 with 0 comment

准备工作

(1)、手机(安卓、ios都可以)/安卓模拟器,今天主要以安卓模拟器为主,操作过程一致。

(2)、抓包工具:Fiddler 下载地址:(https://www.telerik.com/download/fiddler

(3)、编程工具:pycharm

(4)、安卓模拟器上安装抖音(夜神模拟器)

环境搭建

一、fiddler配置

在tools中的options中,按照图中勾选后点击Actions

image-20200821040146466

配置远程链接:

选择允许监控远程链接,端口可以随意设置,只要别重复就行,默认8888。我修改为8899,有时候端口为8888,部分手机无法连接。

image-20200821040301840

然后:重启fiddler!!!这样配置才能生效。

二、安卓模拟器/手机配置

首先查看本机的IP:在cmd中输入ipconfig,记住这个IP,后续我们需要在模拟器/手机中访问它。

image-20200821040425586

手机确保和电脑在同一局域网下。

手机配置:配置已连接的WiFi,代理选择手动,然后输入上图ip端口号为8899。

模拟器配置:设置中长按已连接wifi,代理选择手动,然后输入上图ip端口号为8899。

image-20200821040740507

image-20200821040758574

代理设置好后,在浏览器中输入你设置的ip:端口,例如192.168.0.8:8899,就会打开fiddler的页面。然后点击fiddlerRoot certificate安装证书,要不手机会认为环境不安全。

image-20200821040942395

证书名称随便设,可能还需要设置一个锁屏密码。

接下来就可以在fiddler中抓到手机/模拟器软件的包了。建议安卓版本在5.x.x,抖音版本11.9.0

三、抖音抓包

未完待续

Responses