增强的自动定量是多少?
砖增强自动定量优化集群利用率通过自动配置集群资源根据工作负载体积,与数据处理影响最小延迟你的管道。
增强自动定量改善砖集群自动定量功能具有以下特点:
增强自动定量实现优化流工作负载,并添加对改善批处理工作负载的性能的增强。通过添加或删除机器增强自动定量优化成本随着负载的变化。
增强自动定量主动关闭节点利用率低下,同时保证在关闭没有失败的任务。现有的集群自动定量特征尺度节点只有在节点空闲。
增强自动定量是默认的自动定量模式当你创建一个新的管道在三角洲地区的生活表UI。您可以启用增强自动定量供编辑现有管道管道设置在UI中。你也可以启用增强自动定量当您创建或编辑管道与三角洲住表API。
启用增强自动定量
使用增强的自动定量,做以下之一:
集集群模式来增强自动定量当您创建一个管道或编辑一条输油管道在三角洲地区的生活表UI。
添加
自动定量管道配置默认的集群和设置模式字段增强。下面的示例集群配置一个增强的自动定量最少5工人和最多10个工人。max_workers必须大于或等于min_workers。
请注意
增强自动定量是可用的
默认的集群。如果你包括自动定量配置维护集群配置,使用现有的集群自动定量特性。的
自动定量配置有两种模式:遗产:使用集群自动定量。增强:使用增强的自动定量。
{“集群”:({“标签”:“默认”,“自动定量”:{“min_workers”:5,“max_workers”:10,“模式”:“增强”}}]}
管道自动重新启动后自动定量配置更改,如果管道配置连续执行。重启之后,短时间内会增加延迟。后这段时间延迟增加,集群规模应该基于您的更新自动定量配置和管道延迟恢复之前的延迟特性。
增强的自动定量监测管道启用
您可以使用事件日志在三角洲地区的生活表用户界面来监控增强自动定量指标。增强自动定量的事件自动定量事件类型。下面是示例事件:
事件 |
消息 |
|---|---|
集群调整请求开始 |
|
集群调整请求成功 |
|
集群调整请求部分成功 |
|
集群调整请求失败 |
|
您还可以查看增强自动定量事件通过直接查询事件日志:
为积压指标查询事件日志,看看通过查询事件日志监控数据积压。
监控集群调整请求和响应增强的自动定量操作期间,看到的监视增强的自动定量事件从事件日志。