查看并设置谷歌工作空间的云资源配额

谷歌Cloud对项目的资源使用实施配额,通过防止不可预见的使用高峰来保护谷歌Cloud用户社区。在创建Databricks工作空间时,您指定了一个谷歌Cloud项目,Databricks将使用该项目为集群创建新资源(例如虚拟机实例)。

在创建工作区之前,请查看谷歌Databricks要求的云资源配额在您计划与工作区一起使用的谷歌Cloud项目上运行集群。您可能需要请求增加配额。

注意,并非所有项目都有相同的初始配额。初始配额可能根据您的谷歌云帐户类型、谷歌云帐户的年龄和其他因素而有所不同。随着您越来越多地使用谷歌Cloud,您帐户中初始项目或现有项目的配额可能会相应增加。如果您预计使用量即将显著增加,您可以主动请求配额调整。

重要的

您可能需要提高项目上的一些配额,以便Databricks按预期工作。例如,如果项目超过其CPU配额,则启动Databricks集群失败。

谷歌Databricks要求的云资源配额

所需的配额由相关的谷歌API服务分组。请注意,对于最小功能和大规模运行的建议有不同的值。对于细胞来说默认的所需的最低列时,谷歌Cloud默认值对于初始使用和测试是可接受的。

计算引擎API

计算引擎API配额

所需的最低

建议在规模运行

字段名

cpu

默认的

2400

compute.googleapis.com/cpus

路线

默认的

300

compute.googleapis.com/routes

子网

默认的

275

compute.googleapis.com/subnetworks

正在使用的IP地址

默认的

500

compute.googleapis.com/regional_in_use_addresses

托管实例组

默认的

500

compute.googleapis.com/instance_group_managers

实例组

默认的

500

compute.googleapis.com/instance_groups

硬盘标准(GB)

默认的

50个结核病

compute.googleapis.com/cpus

N2 cpu

默认的

300

compute.googleapis.com/cpus

硬盘SSD (GB)

默认的

50个结核病

compute.googleapis.com/disks_total_storage

本地SSD (GB)

默认的

50个结核病

compute.googleapis.com/local_ssd_total_storage

Databricks用于计算引擎API的SQL配额

如果没有提供所需数量的CPU和存储资源,SQL仓库将无法启动。如果需要,可以增加资源配额以支持SQL仓库的使用。看到审查和增加配额.有关工作区成本的信息,请参见每个工作空间成本

Databricks用于计算引擎API的SQL配额

所需的最低

建议在规模运行

N2 cpu

One hundred.

500

硬盘SSD (GB)

5结核病

30结核病

本地SSD (GB)

15结核病

100年结核病

配额

云监控API

云监控配额

要求的最低配额

大规模运行的推荐配额

每分钟摄取请求的时间序列

默认的

6000

IAM (Identity and Access Management)接口

IAM配额

要求的最低配额

大规模运行的推荐配额

服务账户计数

默认的

One hundred.

检查配额并请求增加配额

  1. “配额”页

  2. 在顶部导航的项目选择器中,选择您计划与工作区一起使用以运行集群的谷歌Cloud项目。

    市场列表项目选择器
  3. 对于每一个数据库项目配额,确认您的谷歌云区域的当前配额。

    1. 对于每个配额,在过滤字段中输入配额名或配额字段名。找到您部署工作区的谷歌Cloud区域的配额行。在筛选器编辑器中,可以添加区域筛选器,以确保只审查所需区域的配额。例如,查询指定区域的cpu配额:

      一个配额,按区域过滤
    2. 若要请求增加配额,请单击配额左侧的复选框,然后单击页面顶部的蓝色文本编辑配额.如果看不到该文本,则可能没有正确的权限或帐户类型。联系谷歌技术支持,询问如何为您的帐户申请增加配额。

    3. 中的指导,在右侧的面板中增加配额值谷歌Databricks要求的云资源配额每个配额。根据您设置的值、用户帐户和谷歌Cloud项目,增加配额可能需要得到服务提供商的批准。如果您请求增加配额,则在创建工作区之前需要等待每个请求的电子邮件确认。

      申请提高配额
    4. 中的所有配额重复此过程谷歌Databricks要求的云资源配额

    5. 等待电子邮件确认您所要求的任何配额增加。

    重要的

    如果您修改了配额,请在配额修改或邮件确认配额增加后15分钟后再创建工作空间。

谷歌相关文档文章: