基因组学管道上的抢占式机器

Question

我尝试使用基因组学管道运行数千台机器，使用v2alpha1 JSON映射中的抢占标志。

即使机器是抢占的 - 许多工作线程甚至在没有启动时就用尽了永久磁盘空间。

GCLOUD Alpha 基因组学操作描述了 $operation_ID

我看到描述：工人被释放

    details:
      '@type': type.googleapis.com/google.genomics.v2alpha1.WorkerReleasedEvent
      instance: google-pipelines-worker-10f2002aa213b3108fb69a7488d0d4ce
      zone: us-east1-c
    timestamp: '2019-04-15T01:49:29.065576Z'
  - description: Worker "google-pipelines-worker-10f2002aa213b3108fb69a7488d0d4ce"
      assigned in "us-east1-c"
    details:
      '@type': type.googleapis.com/google.genomics.v2alpha1.WorkerAssignedEvent
      instance: google-pipelines-worker-10f2002aa213b3108fb69a7488d0d4ce
      zone: us-east1-c
    timestamp: '2019-04-14T19:16:08.141993Z'

我希望只有在抢占式实例可用时才分配工作人员。看起来分配的工作线程占用了磁盘空间，而不占用 CPU 资源。

我应该做的还有什么 - 在设置管道 json 时。

https://cloud.google.com/genomics/reference/rest/Shared.Types/Metadata#Pipeline

Answer 1

您能否加入并将此问题发布到Google Genomics Discussion邮件列表，并提供您在此处看到的更多详细信息？想要了解您尝试运行的管道、您使用的配置以及您看到工作线程在没有 CPU 的情况下占用存储的位置。