xiaochuan1984 2022-05-25 21:51 采纳率: 50%
浏览 79
已结题

关于Scrapy框架中Pipeline.py的image Pipeline处理问题

    def get_media_requests(self, item, info):

        for director in item['directors']:
            director_name = director['name']
            director_image = director['image']
            yield Request(director_image,
                          meta={
                'name': director_name,
                'type': director,
                'movie': item['name']
            })

问题简介

这里从item中取出了图片下载链接,然后使用Request进行访问
并且打印出了item的下载结果,但是返回了异常。

[(False, <twisted.python.failure.Failure scrapy.pipelines.files.FileException: >)]

我的尝试

经过我的查找,发现这段异常代码并不够全面,正常的话后面应该会显示错误原因。
我尝试过修改Scrapy的user-agent信息,也使用过Scrapy shell进行了测试,发现都是生效的。

我想要达到的结果

完成图片的下载

  • 写回答

0条回答 默认 最新

    报告相同问题?

    问题事件

    • 系统已结题 6月2日
    • 创建了问题 5月25日