Google BigQuery流插入的并发请求限制是多少?
我发现BigQuery API有一个限制,但不适用于流插入。
每个用户的并发API请求:300
如果每个用户发出300个以上的并发请求,则进行限制 可能会发生。此限制不适用于流插入。
答案 0 :(得分:1)
以下限制适用于将数据流传输到BigQuery。
- 最大行大小:1 MB。超过此值将导致无效错误。
- HTTP请求大小限制:10 MB。超过此值将导致无效错误。
- 每秒最大行数:每个项目每秒100,000行。超过此数量将导致quotaExceeded错误。每个表每秒的最大行数也是100,000。 您可以在一个表上使用所有此配额,也可以在项目中的多个表之间分配此配额。
- 每个请求的最大行数:每个请求10,000行。我们建议最多500行。
批处理可以将性能和吞吐量提高到一定程度,但以每个请求的延迟为代价。每个请求的行数太少以及每个请求的开销都会使接收效率低下。每个请求的行太多,吞吐量可能下降。- 每秒最大字节数:每张表每秒100 MB。超过此数量将导致quotaExceeded错误。
我总体上认为,设置了某种并发限制