2x查询加速
宣布预测I/O更新公共预览
前情提要,我们已经向你们展示了 一种叫预测I/O的新技术 高达35x可提高选择阅读
热切宣布数据布列克预测优化公共预览智能优化表数据布局提高性能和成本效益
预测优化杠杆Unity目录并湖屋AI确定最佳优化数据执行程序,然后运行无端服务器基础设施操作大大简化湖内行程,腾出时间集中从数据中获取商业价值
高容量数据库能力中最新一行 即利用AI预测基于数据及其存取模式的行动前情提要预测I/O读取并更新执行读更新查询时应用这些技术
挑战
湖屋表从背景优化大有裨益,改善数据布局包括压缩文件以确保文件适当大小或吸尘清理非需要数据文件适当优化提高性能同时降低成本
数据工程团队持续面临挑战,
- 哪种优化运行
- 哪些表应优化
- 多久运行这些优化
bob体育客户端下载湖中平台规模不断扩大并日益自我服务,平台团队发现几乎不可能有效解答这些问题。客户一再表示,他们无法跟上优化从所有新业务使用案例创建表数
连回答这些棘手问题后,团队仍必须处理调度和运行优化的业务重担-例如调度作业、诊断故障和管理底层基础设施
预测优化如何工作
以预测优化,Databricks解决这些棘手问题,释放你宝贵的时间集中用数据驱动商业价值预测优化可用单按键实现从那里它做所有重举
第一,预测优化智能决定哪种优化运行和频率运行AI模型考虑各种输入,包括表格使用模式和现有数据布局和性能特征并输出理想优化进度表 权衡优化预期收益 与预期计算成本
调度生成后,预测优化自动运行这些优化非专用服务器基础设施自动处理机器正确数目和大小,并确保优化任务正确打包并排入最优效率
整个系统端对端运行而无需人工调整并学习贵组织随时间推移使用法,优化对贵组织重要的表位,同时非优先排序单为服务器无计算执行优化外框中所有运算都登录系统表,便于审核并理解运算的影响和成本
效果分析
近几个月来,我们已经注册数位客户 私密预览程序预测优化许多人观察到它能找到两个常见极点之间的甜点:
在一个极端上,一些组织还没有站起精密表优化管道预测优化后,他们可即时开始优化表面,而没有想出最优优化调度或管理基础设施
另一极端是,一些组织可能过度投资优化举例说,团队自动化优化管道, 它诱导运行时或每日ObtimIZE或VACUM作业但这些风险有可能减少回报率少优化操作能否实现相同的性能增益
预测优化帮助找到正确平衡点,确保优化运行只高回报投资
安克数据工程团队帮助预测优化并快速实现这些效益
50%减少年度存储费用
|
|
开始
从今天开始,预测优化见公共预览启动时间小于5分钟as account管理员简单转到帐户控制台>设置>特征增强标签并切换预测优化设置
光点击一击,你就会得到AI优化数据布局的力量 遍历UnityCatalog管理表, 使数据更快和更具成本效益查看文档获取更多信息.
我们才刚开始未来数月中,我们将继续为能力增加更多优化留意更多未来
免费试数据键
