作业失败因集群管理核心请求限制

学习解难数据bricks错误

写由亚当巴夫拉卡

2022年3月4日

问题

数据bricks笔记本或作业API返回下列错误:

创建集群时意外故障exceded:您的请求因API收费限值而被拒绝稍后重试请求或选择大节点类型

因果

错误表示集群管理员服务核心实例请求限制超标

集群管理员核心实例支持最多1000项请求

求解

联系数据键支持提高核心实例的限值

数据布列克可提高作业限制maxBurstyUpsizePerOrg至2000年upsizeTokenRefillRatePerMin上到120当前运行作业增加时会受到影响

增加这些值可停止振荡问题,但也可提高CPU使用率

问题最佳解决办法是用大实例取代集群管理员核心实例支持最大数据传输率

Databricks支持可将当前集群管理实例类型修改为大实例类型

文章有帮助吗