对于分析/报告特定项目,我需要将Web API响应的数据摄取到Azure SQL Table/Azure Data Lake中。我与将WebJobs vs DataFactory用于数据摄入感到困惑。
我应该使用Azure SQL表或Azure Data Lake吗?
Azure SQL数据库是SQL Server。Azure Data Lake可以看作是"无限" HDD。选择将取决于您要存储和使用数据的方式,也取决于卷。如果您需要存储大量的结构化数据,也应考虑Azure SQL DataWarehouse。
摄入数据,您有多种解决方案。您可以查看此链接: -https://learn.microsoft.com/en-us/azure/data-factory/data-factory-azure-copy-wizard -https://learn.microsoft.com/en-us/azure/azure-functions/functions-compare-logic-apps-ms-flow-webjobs
Azure数据工厂旨在加载大量数据(数百万记录)。