在使用 Google Cloud Composer 时监控 Airflow Web 服务器



使用 Google Cloud Composer 时,如何监控 Airflow Web 服务器?如果 Web 服务器因错误而关闭或崩溃,我希望收到警报。

您可以使用堆栈驱动程序监控:https://cloud.google.com/composer/docs/how-to/managing/monitoring-environments。警报也可以在堆栈驱动程序中设置。

目前,Airflow Web 服务器的细粒度指标不会导出到 Stackdriver,因此无法像 Cloud Composer 环境中的其他资源(例如 GKE 集群、GCE 实例等(那样对其进行监控。这是因为 Web 服务器与大多数环境资源所在的主项目一起在租户项目中运行。

但是,自 2019 年 3 月 11 日起,Composer 中 Airflow 的 Web 服务器日志现在在 Stackdriver 中可见。这意味着目前,您可以为 Web 服务器日志配置基于日志的指标(在包含Traceback等的行上匹配(。

最新更新