Google BigQuery流插入的并发请求限制是多少?

时间:2019-03-25 03:37:56

标签: google-bigquery

Google BigQuery流插入的并发请求限制是多少?

我发现BigQuery API有一个限制,但不适用于流插入。

  

每个用户的并发API请求:300

     

如果每个用户发出300个以上的并发请求,则进行限制   可能会发生。此限制不适用于流插入。

1 个答案:

答案 0 :(得分:1)

以下网址为Streaming Inserts Limits

  

以下限制适用于将数据流传输到BigQuery。

     
      
  • 最大行大小:1 MB。超过此值将导致无效错误。
  •   
  • HTTP请求大小限制:10 MB。超过此值将导致无效错误。
  •   
  • 每秒最大行数:每个项目每秒100,000行。超过此数量将导致quotaExceeded错误。每个表每秒的最大行数也是100,000。   您可以在一个表上使用所有此配额,也可以在项目中的多个表之间分配此配额。
  •   
  • 每个请求的最大行数:每个请求10,000行。我们建议最多500行。
      批处理可以将性能和吞吐量提高到一定程度,但以每个请求的延迟为代价。每个请求的行数太少以及每个请求的开销都会使接收效率低下。每个请求的行太多,吞吐量可能下降。
  •   
  • 每秒最大字节数:每张表每秒100 MB。超过此数量将导致quotaExceeded错误。
  •   

我总体上认为,设置了某种并发限制