外部导包scrapy转为scrapy框架后的scrapyd部署问题

Question

大佬您好，我之前用的不是scrapy框架而是直接导包的然后在转为scrapy框架时候出现了问题，因为有一个文件是独立出来用于向指定地址发送爬取的信息的， 所以直接独立出来了然后一本地跑程序正常后打算直接部署时候出错了，您帮忙看看！谢谢大佬

Answer 1

根据提供的错误信息，可以看出问题是scrapyd部署时找不到sender.py这个文件。这可能是因为在部署时没有将sender.py文件打包到egg文件中。

可以尝试以下解决方案：

1. 在项目根目录下创建一个MANIFEST.in文件，然后在其中添加一行 include sender.py，以告诉scrapyd在打包时包含该文件。
2. 可以在setup.py文件中的packages和package_data中添加相应的文件和文件夹，以确保文件在打包时被包含。

以上两种方法可以尝试解决失败问题。如果还存在问题，可以使用调试工具来进一步查找问题。