基于Scrapy分布式爬虫打造搜索引擎

眉间皱痕 提交于 2020-01-28 00:45:47

一,学习目的

获取想要的知识

二,环境配置和基础知识铺垫

1.pycharm 的安装和简单使用

ide : pycharm
数据库:mysql , redis , elasticsearch
开发环境:virtualenv

2.mysql 和navicat的安装和使用

windows下安装python

虚拟环境的安装和配置

3级标题

爬取真实数据

Scrapy 突破反爬虫技术

Scrapy进阶开发

Scrapy redis分布式爬虫

elasticsearch django 实现搜索引擎

2级标题

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!