xiaochuan1984 2022-05-25 21:51 采纳率: 50%
浏览 40
已结题

关于Scrapy框架中Pipeline.py的image Pipeline处理问题

    def get_media_requests(self, item, info):

        for director in item['directors']:
            director_name = director['name']
            director_image = director['image']
            yield Request(director_image,
                          meta={
                'name': director_name,
                'type': director,
                'movie': item['name']
            })

问题简介

这里从item中取出了图片下载链接,然后使用Request进行访问
并且打印出了item的下载结果,但是返回了异常。

[(False, <twisted.python.failure.Failure scrapy.pipelines.files.FileException: >)]

我的尝试

经过我的查找,发现这段异常代码并不够全面,正常的话后面应该会显示错误原因。
我尝试过修改Scrapy的user-agent信息,也使用过Scrapy shell进行了测试,发现都是生效的。

我想要达到的结果

完成图片的下载

  • 写回答

0条回答 默认 最新

    报告相同问题?

    问题事件

    • 系统已结题 6月2日
    • 创建了问题 5月25日

    悬赏问题

    • ¥30 为什么会失败呢,该如何调整
    • ¥50 如何在不能联网影子模式下的电脑解决usb锁
    • ¥20 服务器redhat5.8网络问题
    • ¥15 如何利用c++ MFC绘制复杂网络多层图
    • ¥20 要做柴油机燃烧室优化 需要保持压缩比不变 请问怎么用AVL fire ESE软件里面的 compensation volume 来使用补偿体积来保持压缩比不变
    • ¥15 python螺旋图像
    • ¥15 算能的sail库的运用
    • ¥15 'Content-Type': 'application/x-www-form-urlencoded' 请教 这种post请求参数,该如何填写??重点是下面那个冒号啊
    • ¥15 找代写python里的jango设计在线书店
    • ¥15 请教如何关于Msg文件解析