古_柯 2020-03-23 16:41 采纳率: 0%
浏览 114

外部导包scrapy转为scrapy框架后的scrapyd部署问题

大佬您好,我之前用的不是scrapy框架而是直接导包的然后在转为scrapy框架时候出现了问题,因为有一个文件是独立出来用于向指定地址发送爬取的信息的, 所以直接独立出来了然后一本地跑程序正常后打算直接部署时候出错了,您帮忙看看!谢谢大佬

图片说明

  • 写回答

1条回答 默认 最新

  • 憧憬blog 2023-03-15 02:20
    关注

    根据提供的错误信息,可以看出问题是scrapyd部署时找不到sender.py这个文件。这可能是因为在部署时没有将sender.py文件打包到egg文件中。

    可以尝试以下解决方案:

    1. 在项目根目录下创建一个MANIFEST.in文件,然后在其中添加一行 include sender.py,以告诉scrapyd在打包时包含该文件。
    2. 可以在setup.py文件中的packagespackage_data中添加相应的文件和文件夹,以确保文件在打包时被包含。

    以上两种方法可以尝试解决失败问题。如果还存在问题,可以使用调试工具来进一步查找问题。

    评论

    报告相同问题?

    悬赏问题

    • ¥15 burpsuite密码爆破
    • ¥15 关于#ubuntu#的问题,如何解决?(相关搜索:移动硬盘)
    • ¥15 scikit安装之后import不了
    • ¥15 Ros2编译一个使用opencv的c++节点的时候,报了这个错误,请问怎么解决啊
    • ¥15 人脸识别相关算法 YOLO,AI等
    • ¥15 spark问题方便加V17675797079
    • ¥15 Python代码不打印的原因
    • ¥20 微软SEAL库的安装和使用,VS2022环境配置问题
    • ¥15 数学问题也不知道那种类型的问题
    • ¥15 R作图的时候,文本框重叠了怎么办?