慢集群启动并缺失节点

启动数据键时学习解决“无法获取节点”错误

写由亚当巴夫拉卡

2022年12月8日

问题

集群需要很长时间启动并显示类似下列错误消息:

集群运行但无法获取X节点

因果

提供AzureVM通常需要2至4分钟,但如果集群内所有VM无法同时提供,集群生成可延迟原因是AzureDatabricks不得不在一段时间内重发VM创建请求

求解

azureDatabricks自动获取额外节点并更新集群

要改变这一点,你应配置集群大实例类型和小节点数

文章有帮助吗