我们如何提高goggledlp-api的速率限制



对于我们试图通过Spark作业处理数百万条记录的应用程序来说,默认设置为600 req/min的速率限制非常低。即使使用由16个节点和4个核心组成的集群,我们也达到了速率限制。我们计划有25个这样的工作并行运行。你能建议一下如何将费率限制提高到每分钟20k 吗

根据GCP官方文件:

您可以通过选择"编辑"将配额编辑到最大值谷歌云仪表板的配额页面中的配额。请求配额的增加,请根据您请求的增加编辑您的配额,然后说明理由并提交您的更新。当您的接收到请求。可能会联系您以了解更多信息关于您的请求。审查您的请求后,您通知它是否已被批准或拒绝。

https://cloud.google.com/docs/quota是Google Cloud配额的源文档。

一旦您提交配额申请,我们将向您发送一些后续问题,以帮助我们计算授予配额所需的容量,因此请留意该电子邮件。

最新更新