未分類
24 11 月 2020

scrapyd 部署不会添加外部文件吗

scrapyd 部署不会添加外部文件吗

資深大佬 : tuoov 0

尝试使用 scrapydweb 部署项目，但是那些需要导入外部文件(包含 urls 的文本文件或 json)的爬虫全部上传失败了，报错都是 FileNotFound 。没有这种依赖的爬虫能够正常地部署并使用，有什么解决方案吗？

大佬有話說 (2)

  • 資深大佬 : yagamil

    egg

  • 主 資深大佬 : tuoov

    @yagamil 我通过绝对路径检查了一下，好像在 egg 化项目时的确不会打包这些文件，是我处理的方式有问题还是设计就是这样？