演讲实录 | MaxCompute 智能物化视图

文章预览

本文根据《Data+AI融合趋势下的智能数仓平台建设》线下meetup演讲实录整理而成 作者：吴谋 - 阿里云计算平台技术专家 01 MaxCompute 智能数仓简介 MaxCompute 智能数仓本质上是一个具备自我学习能力且开箱即用的优化功能集合。尽管 MaxCompute 智能数仓的优化功能针对的是相对独立的场景，但它们遵循一致的逻辑和思路。我们可以通过架构图来解析一下。 当用户提交 Query 后，首先经过 Optimizer，然后进到编译器，生成一个执行计划，随后被传递到执行引擎，在执行过程中收集 statistics 信息和历史信息。这些统计信息和历史信息会被输入到智能数仓的分析模型中进行深入分析。分析结果通过控制台输出到 DataWorks 和 TopConsole。同时，这些优化后的数据能力反哺到元仓，作为基础数据再次进入优化器。这样，当用户的下一个 Query 进来，就能得到一个较好的调优 ………………………………