Dataproc.googleapis.com上没有Dataproc作业日志



我在dataproc集群中启用了以下策略

**"dataproc:dataproc.logging.stackdriver.enable": "true",
"dataproc:dataproc.logging.stackdriver.job.driver.enable": "true",
"dataproc:dataproc.monitoring.stackdriver.enable": "true",**
"dataproc:efm.mapreduce.shuffle": "hcfs",
"dataproc:efm.spark.shuffle": "primary-worker",
"dataproc:job.history.to-gcs.enabled": "true",
**"dataproc:yarn.log-aggregation.enabled": "true"**

但我没有从dataproc.googleapis.com上得到工作日志。但我得到了纱线日志。请让我知道是否可以从dataproc API以及yarn日志中获取作业日志。谢谢

如果启用了问题中显示的参数,则可以同时获取dataproc日志和yarn日志。

相关内容

  • 没有找到相关文章

最新更新