您的位置: 首页 > 文章 > Python爬虫requests库和Scrapy库的对比 Python爬虫requests库和Scrapy库的对比 分类: 文章 • 2024-06-21 22:19:04 两者相同点: 两者都可以进行页面请求和爬取,Python爬虫的两个重要技术路线。 两者都没有处理js,提交表单,应对验证码等功能,但是可以扩展。 两者不同点: 小的项目推荐选择requests 或者urllib比较简单灵活。规模比较大的推荐使用Scrapy结构更加清晰。