paramquery

抖音爬虫教程，从0到1，爬取抖音用户详细数据 前言 爬取抖音用户的数据需要使用用户的user_id和sec_user_id，我们通过抓包工具获取用户的id以及sec_user_id，然后通过用户的关注列表和follow列表获取更多的用户的user_id和sec_user_id，下面我将介绍一下如何根据user_id和sec_user_id来获取抖音用户的详细数据。 一、分析请求用户数据的api 1. 用户数据抓包 首先在搭建好的环境中通过Fiddle抓取用户数据包。<br/> <br/> 2. 用户数据包分析 2.1. 请求信息分析 请求头字段 | 字段 | 字段值 | | --- | --- | | 请求方法 | GET | | 请求的api | GET后面的 | | 请求的协议 | api后面的，系http1.1 | | 请求的目的主机域名 | aweme-eagle.snssdk.com | | 连接信息 | keep-alive | | Cookie | 你自己的cookies | | Accept-Encoding 编码信息 | gzip | | X-SS-QUERIES | 请求的query | | token | 你自己的token | | sdk版本 | 1 | | User-Agent | 用户代理 | | X-Khronos | 咱也不知道是啥

所需Jar包 mongo-java-driver-3.3.0.jar spring-data-mongodb-1.10.15.RELEASE.jar 配置mongodb.properties mongo.hostport=127.0.0.1:27017 mongo.connectionsPerHost=8 mongo.threadsAllowedToBlockForConnectionMultiplier=4 mongo.connectTimeout=3000 mongo.maxWaitTime=1500 mongo.socketKeepAlive=true mongo.socketTimeout=30000 mongo.authDB=admin # 认证的数据库 mongo.username=admin mongo.password=123456 mongo.connectDB=project # 需要操作的数据库 配置mongodb.xml <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:context="http