使用GCP中的Cloud函数抓取页面,并将其加载到BigQuery中



我有关于GCP的问题。是否可以使用云函数每天抓取页面并将其发送到BigQuery。我已经用Python编写了工作代码,抓取页面并将其保存到csv中,现在我想将其移动到云中。我该怎么做?

您可以从python将抓取的(csv(数据加载到Google Cloud Storage。Bigquery支持将数据加载为新表或将新数据附加到表中。后者需要在python中完成,前者可以使用云控制台中的UI完成。

更多信息在这里在这里

相关内容

  • 没有找到相关文章