自动物化视图（AutoMV）

功能介绍

在数据仓库领域，物化视图是优化重复计算的重要手段。假设用户的业务场景中存在大量的查询语句，这些查询语句共享一些高频的、耗时计算（如JOIN/AGGREGATE）的公共子查询，利用物化视图，可以将这些公共子查询的计算结果存储于物化视图表中。后续在需要使用这些公共子查询的场合，无需再次进行计算，只需读取物化视图表即可，从而达到计算加速和节省计算资源的目的。更多关于物化视图的介绍，请参见物化视图操作。

MaxCompute针对用户在物化视图的实践过程中可能出现的分析难、创建难和运维复杂等问题，推出了自动物化视图（AutoMV）功能，可以有效降低物化视图的创建难度，从而提升用户的使用体验。

在MaxCompute中启用自动物化视图（AutoMV）功能后，系统将自动执行以下操作：

1. 持续监控查询：在项目级别持续监控最近运行的查询，并识别适合作为物化视图以提高性能的公共子查询。

2. 自动创建物化视图：周期性地根据第一步识别的结果自动创建这些物化视图。

3. 智能查询改写：通过物化视图的查询改写功能自动改写作业的查询语句，使其直接读取自动创建的物化视图表。

4. 自适应存储资源管理：AutoMV的自适应存储资源管理机制及自动清理机制，能够在确保不对用户项目空间所占存储造成显著增长的前提下，有效管理AutoMV所占用的存储资源。

使用限制

• 支持地域：华东1（杭州）、华东2（上海）、华北2（北京）、华北3（张家口）、华南1（深圳）、西南1（成都）。

• 创建AutoMV的前提是公共子查询包含如下关系代数算子之一：Project（投影）、Filter（过滤）、JOIN（连接）、Aggregate（聚合）。

• AutoMV不支持跨项目使用。假设有一个物化视图可用于两个MaxCompute项目（项目A和项目B），由于AutoMV的作用域仅限于单个项目内，因此MaxCompute会在A和B中同时创建两个数据完全一致的物化视图。

• AutoMV仅支持精确匹配。为避免作业命中查询范围更大的物化视图而导致性能变差，AutoMV在写入和使用物化视图时，只会命中数据完全等价的物化视图。

管理AutoMV开关并设置存储资源上限

您可通过MaxCompute控制台或SQL命令管理AutoMV开关，并设置AutoMV可用存储上限。手动设置AutoMV可使用的存储资源上限之后，一旦超出该上限，AutoMV将禁止继续向已创建的物化视图中写入数据。

SETPROJECT odps.sql.auto.mv.quota.gb=1024; 

查看AutoMV收益及占用存储

您可在AutoMV页签查看使用自动物化视图功能后，所节省的计算时长、CU时、计算量、计算费用等收益，及存储占用情况。

1. 登录MaxCompute管理控制台，在左上角选择地域。

2. 在左侧导航栏选择智能优化 > 智能物化视图。

3. 在物化视图页面的自动物化视图（AutoMV）页签，选择目标MaxCompute项目（不选，则表示所有项目）和收益统计区间，可以查看已开启AutoMV的项目收益、占用存储，以及具体的AutoMV列表。

   • 指标参数：

     指标	说明

     指标	说明
     命中次数	AutoMV在收益统计区间内，被调用的次数。
     节省计算时长	所有命中所选项目AutoMV的作业在收益统计区间内的计算时长相较于创建AutoMV前计算时长的节省值。
     节省CU时	所有命中所选项目AutoMV的作业在收益统计区间内的CU时消耗相较于创建AutoMV前CU时消耗的节省值。
     节省计算量	所有命中所选项目AutoMV的作业在收益统计区间内的计算量（扫描量*复杂度）相较于创建AutoMV前计算量（扫描量*复杂度）的节省值。仅统计使用按量付费计算资源运行的作业。
     节省计算费用（目录价）	所有命中所选项目AutoMV的作业节省计算量 * 0.3 元/GB（按量付费标准版SQL计算单价）。
     存储占用	AutoMV占用的存储大小。

   • AutoMV列表参数：

     列名称	说明

     列名称	说明
     物化视图名称	AutoMV的名称。
     归属项目	AutoMV所在的项目。
     命中次数	AutoMV在收益区间内被调用的次数。
     节省计算时长	命中该AutoMV的作业在收益统计区间内的计算时长相较于创建AutoMV前计算时长的节省值。
     节省CU时	命中该AutoMV的作业在收益统计区间内的CU时消耗相较于创建AutoMV前CU时消耗的节省值。
     节省计算量	命中该AutoMV的作业在收益统计区间内的计算量（扫描量*复杂度）相较于创建AutoMV前计算量（扫描量*复杂度）的节省值。仅统计使用按量付费计算资源运行的作业。
     存储占用	AutoMV占用的存储大小。
     操作	可单击查看详情，查看AutoMV的基本信息和代码详情。 基本信息。 创建时间：AutoMV的创建时间。 表结构更新时间：AutoMV的表结构更新时间。 存储大小：AutoMV占用的存储大小。 代码详情：定义AutoMV的SQL脚本。您可以查看、复制或下载SQL脚本。

计费说明

项目开启AutoMV后，用户只需要对系统自动创建的物化视图存储按标准存储单价支付费用即可，除此之外，无附加服务费用。标准存储价格详情，请参见存储费用。

延伸阅读

• 物化视图操作的相关内容，请参见物化视图操作。

• 物化视图查询改写操作的相关内容，请参见物化视图查询改写。

• 物化视图推荐与管理的功能，请参见物化视图推荐与管理。