能在几秒内触发气流作业吗

Question

我试图通过气流休息api在一秒钟内触发气流作业两次以上，但发现只有一次触发成功。如果安排气流作业，最短时间为1秒。

那么，有什么方法可以在几秒钟内触发气流作业吗？

Answer 1

您没有描述您的用例，但主要是说-Apache Airflow是为计划的批处理作业而构建的，我建议您不要低于小时间隔
如果您发现自己需要更频繁的处理，也许Airflow不是适合您的平台，如果我们谈论的是亚秒，请考虑选择流媒体平台，如Kafka Streams、Apache Spark、NiFi或StreamSets。