精通Scrapy爬虫:21、下载文件和图片:FilesPipeline和ImagesPipeline
资源编号:75951 精通Scrapy 爬虫 热度:29
在之前的章节中,我们学习了从网页中爬取信息的方法,这只是爬虫最典型的一种应用,除此之外,下载文件也是实际应用中很常见的一种需求,例如使用爬虫爬取网站中的图片、视频、WORD文档、PDF文件、压缩包等。本章来学习在Scrapy中如何下载文件和图片。