Azure数据工厂管道日志



Azure Pipeline v2的数据日志存储在哪里,我想检索特定日期的失败管道的数据。(不想使用azure门户来查看这些数据(。是否有任何表/视图保存数据库中的此类数据日志。

据我所知,要获取诊断日志,您可以使用Azure Monitor、Operations Management Suite(OMS(或可视化监控这些管道。

Azure Pipeline v2是指Azure数据工厂v2。使用Azure Monitor 提醒和监控数据工厂

诊断日志:

  • 将它们保存到存储帐户以进行审核或手动检查。您可以使用诊断设置指定保留时间(以天为单位(
  • 将它们流式传输到事件中心,供第三方服务或自定义分析解决方案(如PowerBI(接收
  • 使用日志分析进行分析

日志在Azure Data Factory web服务器上存储45天。如果你想获得管道运行和活动运行元数据,你可以使用Azure Data Factory SDK提取你需要的信息,并将其保存在你想要的地方。

对于日志项分析以及限制对生产数据工厂的访问,建议的方法是配置要发送到日志分析的日志。请确保启用专用的日志记录表,因为这将有助于后端组织日志。

从那里,您还可以设置运行日志分析查询的警报和访问组,以便更好地进行监控。

相关内容

  • 没有找到相关文章

最新更新