问题
全功能集群无法启动,作业无法运行与Apachespark图像无关的错误消息没有下载或不存在
spark图像下载失效
spark图像下载失败或不存在
因果
A级spark图像下载失效错误通常表示网络延迟或配置问题阻塞存储账户托管Spark图像
求解
检查databricksvNet配置以确保存储器流量不因下列因素阻塞:
- DNS系统默认情况下,资源部署VNet使用AzuredNS解决域名使用自定义DNS服务器时,必须配置自定义DNS向Azure递归解决器转发这些请求168.63.129.16解决Azure人工制品IP地址复习配置自定义dNS文档获取更多信息
可检查Azure门户中的dNS设置从中浏览databricksVNet并选择dNS服务器Azure递归解决者IP地址
- 防火墙- 如果VNet启动防火墙,审查设置并确保它不阻塞存取流量
你可以检查Azure门户中的防火墙设置从那里浏览数据bricksVNet并选择Firewall菜单防火墙规则创建后,您可在那里查看
- 网络安全集团验证网络安全组包括所有需要NSG规则.
可访问Azure门户并浏览VNet查看NSG规则设置从中选择子网菜单中选择子网,并选择两个子网安全组双向检查进出境规则并确认所有所需规则都加载并阻塞存储器通量
- 用户定义路线和服务端点验证路线表包含所有需要用户定义路径.使用服务端点而非用户定义布洛布存储路径时,也检查端点
可访问Azure门户并浏览VNet检查UDR设置从中选择子网菜单中的子网并选择两个子网路由表双检查路径并确认所有需求都添加并封存流量不阻塞
服务端点,从 VNet页面中选择 service端点服务端点创建后,您可查看端点.
另一方面,作为一种最佳做法,考虑搭建灾难恢复解决方案最小化服务问题撞击保证组织中合适的人通过配置了解服务问题Azure服务健康报警.警告可触发邮件、短信、推送通知、Webhooks等