python - pyspider分布式下可以控制某一工程的工作节点数量么?

 幸运幸福摩天轮的世界 发布于 2022-10-25 17:21

请问,pyspider 在分布式下,可以控制某一个工程的工作节点数量么?比如我有三个工作节点,但是某一个工程我只想让它在一个工作节点上运行,这个该怎么做?

1 个回答
  • 你需要自己实现这一功能

    控制工作节点会增大部署和 debug 的负担,所以节点越平等越扁平更好。

    如果你确实需要这个功能,在节点前增加一个 dispatcher 分发器的模块,根据你需要的条件分发到特定节点即可。

    2022-10-26 23:27 回答
撰写答案
今天,你开发时遇到什么问题呢?
立即提问
热门标签
PHP1.CN | 中国最专业的PHP中文社区 | PNG素材下载 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有