Python3.6+Scrapy爬取58同城二手房数据,保存到MongoDB和CSV文件

一曲冷凌霜 提交于 2019-11-26 07:48:50

爬取58同城二手房数据,将爬取的数据保存在一个csv文件和MongoDB数据库。

代码见:https://github.com/wangjun1996/58tongcheng_spider

(运行项目中  zhihuUser/main.py  即可开始爬虫)

 

本人爬取的是大连市的二手房数据,若要爬取其他城市数据,修改 tongcheng\spiders\tongcheng_spider.py 中的相应url即可

标签
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!