使用DataWorks Notebook进行数据开发与分析

更新时间:
复制 MD 格式

环境初始化完成后,将自动为您在当前地域创建名为OpenLake解决方案体验空间的DataWorks工作空间,并在该空间完成OpenLake解决方案运行所需要的环境,例如绑定任务执行资源组、绑定OpenLake相关引擎等,您可在该空间下通过如下方式体验OpenLake。

说明

体验OpenLake解决方案能力需要DataWorks空间参与使用新版数据开发(Data Studio),详情请参见创建OpenLake工作空间。

方式一:基于空间内置案例体验

环境初始化完成后,OpenLake解决方案体验工作空间会内置一个Notebook入门案例,您可直接基于该案例体验OpenLake产品能力。

步骤一:查看空间内置案例

在DataWorks控制台>OpenLake解决方案页面,单击前往Notebook,将跳转至OpenLake解决方案体验空间Data Studio产品页面快速体验内置案例。

步骤二:运行OpenLake案例

体验空间会自动初始化好Notebook作业运行环境,如个人开发环境。您只需要在案例运行前,将案例所需要的环境变量替换为您实际OpenLake环境相关参数即可。关于OpenLake环境变量的相关信息,您可参考以下方式获取:

  • 计算资源相关信息,您可前往DataWorks控制台在左侧导航栏单击工作空间,进入工作空间列表页面后,单击工作空间名称,进入工作空间详情页面,然后单击计算资源页签查看已绑定的计算资源,或单击绑定计算资源绑定新的计算资源。

  • DLF相关信息,您可单击链接查看。

# 请在下方填写全局参数1-4的值,再运行代码
# 1)请将 [dlf_region] 替换为您的DLF所在区域ID,例如cn-hangzhou、cn-beijing、cn-shanghai、cn-shenzhen
dlf_region = "[dlf_region]"
# 2)请将 [dlf_catalog_id] 替换为您DLF数据目录ID;如果已进行OpenLake一体化开通,推荐填写:"myfirstcatalog"名称对应的DLF数据目录ID
dlf_catalog_id = "[dlf_catalog_id]"
# 3)请将 [accessKeyId] 替换为当前登录云账号的AccessKeyId
accessKeyId = "[accessKeyId]"
# 4)请将 [accessKeySecret] 替换为当前登录云账号的AccessKeySecret
accessKeySecret = "[accessKeySecret]"
# DLF服务的VPC网络Endpoint 和 Hologres访问DLF的Endpoint,格式已适配,以下配置无需修改
dlf_endpoint = f"dlfnext-vpc.{dlf_region}.aliyuncs.com"
dlf_endpoint_for_holo = f"dlfnext-share.{dlf_region}.aliyuncs.com"

方式二:导入案例体验

DataWorks Gallery提供Notebook经典案例,您可以直接在DataWorks里运行这些教程,也可以基于教程二次开发,适配您的业务场景。

步骤一:基于Gallery导入OpenLake解决方案

  1. 在OpenLake解决方案页面,单击查看事件案例进入查看实践案例页面:DataWorksGallery。

  2. 在DataWorksGallery页面的全部分类中搜索OpenLake解决方案快速入门。

    • 方式一:搜索到该案例后,直接单击该案例右下角的载入案例按钮,会出现载入案例窗口,只需配置工作空间和个人开发环境的实例,单击确认即可导入。

    • 方式二:单击该案例标题,可查看该案例明细,在明细页面,单击载入案例,会出现载入案例窗口,只需配置工作空间和个人开发环境的实例,单击确认即可导入。

步骤二:进入Data Studio产品页面

载入案例时会自动跳转至DataWorks的Data Studio(数据开发)页面,您也可以通过以下方式进入Data Studio。

在DataWorks控制台>OpenLake解决方案页面,单击前往Notebook,将跳转至OpenLake解决方案体验空间Data Studio产品页面。

步骤三:运行OpenLake案例

按照上述方式一:基于空间内置案例体验内步骤二的方式,将案例所需变量替换为您OpenLake环境实际需要的值,即可正常运行案例。