最近是出于兴趣,在网络上搜集了相关资料,实现了抓取抖音数据的流程,本内容只讲大致思路,具体的实现内容,csdn上有很多优秀的教程,在此我们也感谢先驱做出的贡献。
下方参考资料中,1号参考资料中通过模拟器实现的自动滑动效果,大家可以借鉴一下;2号参考资料通过简介的语言以及便捷的方式借鉴了数据抓取方式,我们可以直接参考2号参考资料抓取数据,亲测好用。
参考资料:
(1)https://blog.csdn.net/z_ipython/article/details/100127954
(2)https://www.cnblogs.com/CYHISTW/p/11626990.html
思路:
1、采用夜神模拟器 Android5 就行,里面安装抖音
2、安装python环境,然后安装mitmproxy 协议,
3、启动mitmproxy 之后,在模拟器中配置好代理,
4、配置完代理之后,注意要用模拟器访问mitm.it网站,下载android证书,然后手动安装证书
5、证书安装完毕之后,基本上整体流程到这里就结束了,剩下的就是去按照自己的要求去修改python脚本,按照要求来抓取对应的内容即可
来源:oschina
链接:https://my.oschina.net/u/4394685/blog/4327786