问题

Databricks作业失败,原因是磁盘空间不足,即使存储自标启动

当审查集群事件日志时,会看到消息表示实例失败扩展盘因授权报错

实例i-xxxxxxxxx编码授权失效消息:xxxx状态代码: 403错误代码:非授权操作请求ID:xxxxxx当前规模:98.30GB当前自由空间:8.89GB

因果

工作空间底层AWS账户没有正确权限使Databricks对实例附加EBS卷继集群终止后删除

求解

Databricks工作空间部署IAM角色必须添加以下权限

ec2:AttachVolumeec2:CreateVolumeec2:DeletVolumeee2:DistripteVolume

Databricks工作空间部署IAM角色登录账号控制台并浏览AWS账号标签