quotes 整站数据爬取存mongo
安装完成scrapy后爬取部分信息已经不能满足躁动的心了,那么试试http://quotes.toscrape.com/整站数据爬取 第一部分 项目创建 1、进入到存储项目的文件夹,执行指令 scrapy startproject quotetutorial ,新建一个项目quotetutorial。 2. cd quotetutorial 3、 scrapy genspider quotes quotes.toscrape.com 创建quotes.py模板文件 第二部分 配置模板 1、到settings.py文件内进行配置 1 # -*- coding: utf-8 -*- 2 3 # Scrapy settings for quotetutorial project 4 # 5 # For simplicity, this file contains only settings considered important or 6 # commonly used. You can find more settings consulting the documentation: 7 # 8 # https://doc.scrapy.org/en/latest/topics/settings.html 9 # https://doc.scrapy.org/en/latest