SQL查询与分析

支持的数据源

SQL查询支持的数据源包含MaxCompute、Hologres、EMR Hive、EMR Spark SQL、EMR Impala、EMR Presto、EMR Trino、CDH Hive、CDH Spark SQL、StarRocks、ClickHouse、SelectDB、Doris、AnalyticDB for MySQL3.0、AnalyticDB for PostgreSQL、Tablestore、MySQL、PostgreSQL、Oracle、SQL Server。

数据源权限说明

数据源范围

仅支持查询有权限的工作空间内的数据源数据，因此您需要先联系管理员将您添加为工作空间的数据分析师、模型设计师、开发、运维、空间管理员或项目所有者。

数据源访问权限

数据源访问支持以下两种身份模式访问。

步骤一：添加目录

支持您将系统推荐目录及已授权的数据源下的数据表添加至目录。添加为目录后您可快速查看相应目录下数据表，支持查看表结构并快速生成查询SQL。

1. 进入SQL查询页面。

   登录DataWorks控制台，切换至目标地域后，单击左侧导航栏的数据分析与服务 > 数据分析，单击进入数据分析页面，单击左侧导航栏的SQL查询进入SQL查询页面。

2. 单击目录上方搜索框右侧的按钮，进行添加目录。

   • 数据地图-元数据：数据地图中采集到的表元数据，每个数据源/计算资源即可添加成一个数据集。

   • 数据地图-数据专辑：数据地图中汇集某一些主题表的数据专辑，每个数据专辑即可添加成一个数据集。

   • 我的收藏：数据地图中我收藏的表。

   • 我的MaxCompute表：当前登录账号是表Owner的所有MaxCompute表。

   • 公共数据：MaxCompute提供的公开数据集，可用于快速生成测试数据。

   • 阿里云账单数据：您的阿里云账单数据，添加后可进行账单分析。

   说明

   最多支持添加12个数据集，不需要的数据集可移除。

步骤二：创建SQL查询

基于数据目录查询

完成数据目录添加后，相应数据集将展示在左侧目录树中。

1. 在左侧目录树中，单击打开已添加数据集（例如，我的MaxCompute表）。

2. 右击待分析表的表名，选择浮窗中的生成SQL语句，即可快速生成基于该表的推荐SQL语句的临时文件。

3. 按需调整SQL语句，并保存临时文件至我的文件。

基于数据源查询

1. 在左侧目录树中，鼠标悬浮到我的文件，单击右侧的按钮，新建文件。

2. 在新建文件中编写SQL查询语句，并保存至我的文件。

   说明

   在进行SQL编辑时，DataWorks将在原代码中自动补齐在MaxCompute中有权限的表。

基于分享SQL查询

在左侧目录树中单击他人文件，展示来自别人分享出来的SQL文件。单击SQL文件，在右侧详情页可复制SQL。

基于公共数据集查询

将公共数据集添加至目录后，可单击具体数据集，在右侧详情页的顶部栏可选择不同引擎生成SQL语句。您可用公共数据集进行测试。

步骤三：配置查询引擎并执行

1. 单击SQL详情页面右上方的按钮，配置SQL查询引擎。

   配置项	说明
   工作空间	执行引擎所在的工作空间。 重要 请确保您拥有工作空间的访问权限，否则请联系工作空间管理员帮您添加为空间成员。
   数据源类型	执行引擎类型和名称。 重要 当SQL语句中未指定具体项目时，执行引擎即为默认数据源。
   数据源名称
   访问身份模式	选择查询数据时采用哪种访问模式进行SQL查询： 执行者身份：仅支持MaxCompute和Hologres引擎。当您为MaxCompute项目或Hologres实例的成员拥有Select权限时，推荐选择。 数据源默认访问身份：若您当前账号和创建该数据源时设置的默认访问身份不一致，请授权当前账号该身份。

2. 完成SQL编写之后，您可直接全文运行或者选中部分运行。

   MaxCompute SQL运行前，将展示预计费用。您也可单击SQL文件上方工具栏更多 > 成本预估进行预估。

3. SQL执行完成后，您可在查询结果页面查看运行日志、运行结果、查询结果对应的SQL内容。

   可点击查询结果右上方按钮，切换页面布局为左右布局或者上下布局。

步骤四：结果可视化

在查询结果左侧工具栏，点击按钮可将结果自动生成可视化图表。您可点击右上角的编辑按钮进行图表制作，保存至卡片后进行增强分析。

步骤五：（可选）导出与分享

SQL查询结果支持导出如下形式：

当您需要下载MaxCompute海量数据时，推荐您单击SQL查询菜单左下角的更换SQL运行模式为运行且生成临时表。

• 本地文件：将查询结果以CSV、TXT、XLS格式下载至本地。关键说明如下：

  说明项	具体描述
  下载限制	仅支持MaxCompute、EMR引擎，具体说明参见下载数据条数说明。 若MaxCompute项目开启了数据保护机制（即禁止下载数据），则通过数据分析下载数据会失败。 重要 若不出现该选项，请参见查询结果展示或下载受限？进行处理。
  下载范围	您可选择下载仅表格中展示数据或全部数据。 仅表格中展示数据：仅下载当前页面展示的数据，默认最多为10000条。 全部数据：导出限制范围内所查询的全部结果数据。
  下载方式	支持审批下载和免审批下载。 审批下载：支持您通过设置风险识别规则来识别下载数据操作行为中的风险。下载数据时，需提交下载审批申请，以确保数据使用的合规性和安全性。 说明 仅DataWorks企业版支持设置并开启风险识别规则。 免审批下载：默认为免审批下载，在下载过程中无需进行权限申请。

• MaxCompute表：无需将数据下载至本地再传至MaxCompute表。您可根据需要设置表的生命周期。

• 电子表格：您可保存至电子表格进一步深入分析查询数据。同时支持分享电子表格的最新分析结果至他人。

• 钉钉表格：支持导出至钉钉表格文档。

更多操作

SQL文件版本管理

在SQL文件编辑页面，您也可单击上方工具栏更多 > 版本来查看自动保存的代码和手动保存代码间差异，并选择需要的版本保存。

代码搜索

在左侧目录树上方，单击，您可以输入关键字进行代码搜索。该功能仅限DataWorks标准版以上使用。

查看运行历史

在左侧目录树上方，单击查看SQL查询历史执行记录。

常见问题