爬虫---模块介绍

urllib 模块

urllib是URL和library的缩写
urllib模块是python 3 自带的
实例（下载一个猫的图片）

import urllib.request
response = urllib.request.urlopen("http://placekitten.com/200/300") #下载图片的网址
cat_img = response.read()
with open('cat_200_300.jpg','wb') as f:
    f.write(cat_img)

👇效果如下

Requests 模块

相比 urllib 模块，Requests 模块更强大也更好用，只不过要自主下载

👇下载方法

在 cmd 中（或 powershell）输入:

pip install requests

BeautifulSoup4 模块（BS4）

这是一个网页解析利器，也是要自主下载

👇下载方法

在 cmd 中（或 powershell）输入:

pip install bs4

来源：CSDN

作者：CourserLi

链接：https://blog.csdn.net/CourserLi/article/details/103893329