爬虫使用方法

1.确定你安装了scrapy这个python库并且能正确运行。

2.运行爬虫之前请先打开mongodb，并且确定mongodb的端口是27017

3.进入爬虫目录，运行scrapy crawl dbmeiziSpider

4.需要爬取两千多个网页，所以可能需要二十分钟左右。