在cdsw中获取状态作业

Question

CDSW"Cloudera Data Science Workbench"中有一些R和python脚本。我创建了一个shell脚本来用curl -v -XPOST运行它。

如何从API CDSW获取作业的状态？

Answer 1

嗨，这个问题发布已经有一段时间了，但希望答案对某人仍然有用：(

运行后：

curl -v -XPOST http://cdsw.example.com/api/v1/projects/<$USERNAME>/<$PROJECT_NAME>/jobs/<$JOB_ID>/start --user "API_KEY:" --header "Content-type: application/json"

您应该能够在输出中看到一个如下所示的URL：

http://cdsw.example.com/api/v1/projects/<$USERNAME>/<$PROJECT_NAME>/dashboards/<$ID>

因此，您可以使用它来检索作业状态，例如使用jq管道传输状态(或者不使用它，这样您也可以在输出中看到状态以及返回的其他内容(：

curl -v http://cdsw.example.com/api/v1/projects/<$USERNAME>/<$PROJECT_NAME>/dashboards/<$ID> --user "API_KEY:" | jq '.status'