具有静态工作分配的并行静态作业



本文档介绍运行并行作业的选项。我感兴趣的是"具有静态工作分配的单个作业",我将在其中创建一个作业,将并行度设置为 0>完成次数 == 我的工作项计数。 问题是,我不知道豆荚如何知道他们应该处理哪个项目?环境变量看起来相同...不确定 k8s 是否传递了一些我可以使用的序列号......想法?

在您的情况下,最好的方法是使用一些 MQ 服务。 您的操作顺序可能是下一个:

  • 启动 MQ 服务
  • 创建队列并用消息填充队列
  • 启动处理队列中任务的作业

在这里,您可以找到有关作业模式的最新文档。 另请查看您可以在此处和此处找到的 kube 示例。 在这些示例/任务中,Kubernetes 使用 RabbitMQ。

最新更新