爬虫准备工作
- 参考资料
- python网络数据采集 ’ 图灵工业出版
- 精通python爬虫框架Scrapy ’ 人民邮电出版社
- python3网络爬虫
- Scrapy官方教程
- 前提知识
- url
- http协议
- web前端 ’ html, css, js
- ajax
- re, xpath
- xml
爬虫简介
-
爬虫定义：网络爬虫（又被称为网页蜘蛛、网络机器人，在FOAF社区中间，更经常的称为网页追逐者），
是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本
另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫 -
两大特征
- 能按作者要求下载数据或者内容
- 能自动在网络上流窜
-
三大步骤
- 下载网页
- 提取正确的信息
来源：CSDN
作者：若尘
链接：https://blog.csdn.net/qq_29339467/article/details/103681146