社区支持的集群管理器

备注

如果你使用AWS、Azure、GCP或vSphere，你可以使用 Ray集群启动器 来简化集群设置过程。

以下是社区支持的集群管理器列表。

• 在 YARN 上部署
  • Skein 配置
  • 打包依赖项
  • YARN 中的 Ray 设置
  • 运行作业
  • 清理
  • 有问题或疑问吗？
• 在 Slurm 上部署
  • 使用 Ray 与 SLURM 的演练
  • Python-接口 SLURM 脚本
  • 示例和模板
• 在LSF上部署
• 在 Spark Standalone 集群上部署
  • 运行一个基本示例
  • 在Spark集群上创建一个长时间运行的Ray集群
  • Ray on Spark API

使用自定义的云或集群管理器

Ray 集群启动器目前支持 AWS、Azure、GCP、阿里云、vSphere 和 KubeRay 开箱即用。要在其他云提供商或集群管理器上使用 Ray 集群启动器和自动缩放器，您可以实现 node_provider.py 接口（100 行代码）。一旦实现了节点提供商，您可以在集群启动器配置的 provider section 中注册它。

provider:
  type: "external"
  module: "my.module.MyCustomNodeProvider"

你可以参考 AWSNodeProvider, KubeRayNodeProvider 和

LocalNodeProvider 获取更多示例。