Python爬虫框架Scrapy 学习笔记 3 ------- 第一个Scrapy项目

分类: 文章 • 2023-01-26 00:16:45

开发环境PyCharm

但是这次不是在单个文件中运行，而是创建一个scrapy项目

1.使用命令行工具创建scrapy项目的基本目录结构

2. 编辑items.py

3.在spiders目录下，新建spider1.py

报错很正常

我们按照scrapy project的目录结构导入了TorrentItem，而不是pyCharm project的目录结构

4.运行spider

抓取到数据被存到文件mininova-data.json

转载于:https://blog.51cto.com/dingbo/1599566