scrapy抓取豆瓣网细化抓取到的信息(2)

紧接上文内容(https://www.cnblogs.com/guanguan-com/p/13535351.html),来细化爬虫程序

3.制作爬虫

详细教程可以参考慕课网@大壮老师的课程https://www.imooc.com/video/17518

编写细致化的爬虫文件如下

scrapy抓取豆瓣网细化抓取到的信息(2)

注意代码之间的缩进规则,没有红波浪的下划线即没有错误,鼠标移动到红波浪的下划线位置会提示错误

然后我们到main.py中运行爬虫程序如下,即为成功

scrapy抓取豆瓣网细化抓取到的信息(2)

4.储存内容

(1)在cmd执行程序下输入scrapy crawl douban_spider -o test.json回车

(2)继续输入scrapy crawl douban_spider -o test.csv回车

scrapy抓取豆瓣网细化抓取到的信息(2)