阿里云OpenLake是基于开放可控数据湖仓构建的大数据/搜索/AI一体化解决方案。通过元数据管理平台DLF管理结构化和半/非结构化数据,提供湖仓数据表和文件的安全访问及IO加速。支持多引擎对接和平权协同计算,通过DataWorks统一开发,并保障大规模任务调度。我们为您提供了一键开通解决方案的服务,您可以一键开通OpenLake解决方案相关的云产品。在购买完成之后,我们将为您初始化OpenLake解决方案的体验环境,创建资源实例,并将OpenLake解决方案的最佳实践案例导入体验环境中,以便您能够更好地体验解决方案。
方案说明
阿里云OpenLake解决方案建立在开放可控的OpenLake湖仓之上,提供大数据搜索与AI一体化服务。基于OSS的公共湖仓,结合元数据管理平台DLF,支持结构化、半结构化及非结构化数据的管理,确保数据表和文件的安全访问,并具备增删改查与IO加速能力。该方案支持大数据、搜索和AI多引擎对接,实现引擎平权协同计算。通过DataWorks一体化IDE或Notebook,用户可统一进行多引擎SQL或Python开发,享受多任务可视化调度与大规模并发执行的保障。用户可以便捷构建OpenLake湖仓表,跨不同计算引擎进行数据操作,并通过构建多模态索引,实现搜索和RAG能力的数据透出。在同一开发环境中,用户可结合AI特征工程、模型训练和在线预测,全面提升数据处理和分析效率。
为方便您快速使用OpenLake解决方案完整能力,我们为您提供了一键开通OpenLake相关产品,并初始化体验环境的能力。
条件限制
仅支持阿里云主账号或具有AdministratorAccess角色权限的RAM用户账号开通OpenLake解决方案。权限详情请参见产品及控制台权限控制详情:RAM Policy。
仅为已完成企业实名认证的用户提供一定的免费试用额度,未完成企业实名认证的用户可以通过免费试用入口一键开通OpenLake解决方案,但OpenLake相关产品服务将默认按实际使用量计费。
免费试用
OpenLake免费试用默认一键开通以下产品的按量付费服务,并且面向企业实名认证用户提供一定的免费额度,具体折扣额度,您可在免费试用开通时查看。
面向人群:阿里云企业用户,详情请参见:企业实名认证。
抵扣包有效时长:3个月。
免费额度:详情可在免费试用OpenLake解决方案开通页面查看。
重要免费试用通过支付抵扣包来减免订单金额,每个用户享有一次免费体验权益,试用时请注意抵扣包的容量及有效期,试用到期后,平台将按照原价收费。
因
Hologres
/StarRocks
示实例开通后会立即开始消耗套餐中对应的资源包,开通后会自动在30小时15分钟
/99小时
后停机,停机后可手动开启,但开启后会开始按量计费。为避免产生不必要的消费,您试用完成后,请注意释放资源。
产品列表
OpenLake免费试用会为您开通如下列表内的产品:
一键开通的部分产品用户名密码如下:
OpenSearch账号密码:
用户名:admin
,登录密码:admin123
。StarRocks账号密码:
用户名:admin
,登录密码:Admin@01
。
一键开通OpenLake解决方案
步骤一:进入OpenLake解决方案页
OpenLake解决方案可以通过以下两种方式来进入OpenLake解决方案页:
方式一:登录DataWorks控制台切换至目标地域后,单击左侧导航栏 ,进入OpenLake解决方案解决方案页面。
方式二:单击该链接OpenLake大数据解决方案直接查看OpenLake大数据&AI一体化解决方案。
步骤二:免费试用OpenLake解决方案
OpenLake解决方案提供免费试用功能,可为您快速部署OpenLake解决方案体验环境,并为完成企业实名认证的用户提供OpenLake免费试用资源。您可前往OpenLake解决方案页面,单击免费试用按钮,进入OpenLake解决方案免费试用购买页面,参照以下内容在您的账号下一键部署OpenLake体验环境,企业实名认证用户可同步领取OpenLake免费试用资源。
确认产品配置。
我们将默认为您开通产品列表中的10个云产品,并同步创建相关云实例,OpenLake解决方案免费试用购买页面将展示即将创建的各云产品实例基本信息,以及OpenLake免费试用抵扣包费用抵扣情况,您可在此了解即将开通的云产品服务及其计费模式。
说明您可截图保留这些信息,以便后续进行OpenLake开发时,能够快速获取。
确认资源抵扣情况。
OpenLake将默认开通上述产品的按量付费服务,并且在3个月内,提供一定的免费额度,您可在抵扣包套餐处单击查看详情。
重要试用时请注意抵扣包的容量及有效期,试用到期后,平台将按照原价收取费用。建议您在试用OpenLake解决方案后,且不需要再继续使用的情况下,及时清理初始化的资源,避免产生过多费用。
非企业实名认证过的用户通过免费试用入口也已可以一键开通OpenLake解决方案,但OpenLake相关产品服务将默认按实际使用量计费。
修改云产品专有网络。(可选)
OpenLake解决方案要求OpenLake相关云产品部署在同一个VPC,vSwitch下,并且OpenLake解决方案将在您确认购买后在您账号自动创建默认的VPC,vSwitch,您可在界面网络配置位置修改上述涉及网络环境的云产品部署环境。
支付购买。
上述内容确认完成后,单击免费购买,确认支付并购买上述云产品。支付购买初始化时间大约需要2-5分钟,请勿关闭窗口,请耐心等待。
重要此步骤购买成功后,OpenLake相关云产品均已开通,抵扣包的用量开始被消耗,若步骤5初始化阶段出现问题,请参考附录:手动配置OpenLake环境。
确认环境初始化成功。
免费购买成功后,将进行OpenLake体验环境初始化过程,您可前往DataWorks控制台>
查看环境初始化过程与结果。说明上述产品创建完成后,您也可以前往各产品控制台,查看OpenLake解决方案创建的云实例。
体验OpenLake解决方案能力
环境初始化完成后,将自动为您在当前地域创建名为OpenLake解决方案体验空间的DataWorks工作空间,并在该空间完成OpenLake解决方案运行所需要的环境,例如绑定任务执行资源组、绑定OpenLake相关引擎等,您可在该空间下通过如下方式体验OpenLake。
方式一:基于空间内置案例体验
环境初始化完成后,OpenLake解决方案体验工作空间会内置一个Notebook入门案例,您可直接基于该案例体验OpenLake产品能力。
步骤一:查看空间内置案例
在DataWorks控制台>OpenLake解决方案页面,单击前往Notebook,将跳转至OpenLake解决方案体验空间Data Studio产品页面快速体验内置案例。
步骤二:运行OpenLake案例
体验空间会自动初始化好Notebook作业运行环境,如个人开发环境。您只需要在案例运行前,将案例所需要的环境变量替换为您实际OpenLake环境相关参数即可。关于OpenLake环境变量的相关信息,您可参考以下方式获取:
计算资源相关信息,您可前往DataWorks控制台在左侧导航栏单击工作空间,进入工作空间列表页面后,单击工作空间名称,进入工作空间详情页面,然后单击计算资源页签查看已绑定的计算资源,或单击绑定计算资源绑定新的计算资源。
DLF相关信息,您可单击链接查看。
方式二:导入更多案例体验
DataWorks Gallery提供Notebook经典案例,您可以直接在DataWorks里运行这些教程,也可以基于教程二次开发,适配您的业务场景。
步骤一:基于Gallery导入OpenLake解决方案
在OpenLake解决方案页面,单击查看事件案例进入查看实践案例页面:DataWorksGallery。
在DataWorksGallery页面的全部分类中搜索
OpenLake解决方案快速入门
。方式一:搜索到该案例后,直接单击该案例右下角的载入案例按钮,会出现载入案例窗口,只需配置工作空间和个人开发环境的实例,单击确认即可导入。
方式二:单击该案例标题,可查看该案例明细,在明细页面,单击载入案例,会出现载入案例窗口,只需配置工作空间和个人开发环境的实例,单击确认即可导入。
步骤二:进入Data Studio产品页面
载入案例时会自动跳转至DataWorks的Data Studio(数据开发)页面,您也可以通过以下方式进入Data Studio。
在DataWorks控制台>OpenLake解决方案页面,单击前往Notebook,将跳转至OpenLake解决方案体验空间Data Studio产品页面。
步骤三:运行OpenLake案例
按照上述方式一:基于空间内置案例体验内步骤二的方式,将案例所需变量替换为您OpenLake环境实际需要的值,即可正常运行案例。
释放资源
完成OpenLake解决方案试用后,若您无需继续使用OpenLake解决方案,您可参考以下内容释放相关资源。
释放MaxCompute资源可参考:MaxCompute资源释放参考。
释放实时数仓Hologres资源可参考:Hologres资源释放参考。
释放E-MapReduce Serverless Spark 资源可参考:E-MapReduce Serverless Spark 空间释放参考。
释放E-MapReduce Serverless StarRocks 资源可参考:E-MapReduce Serverless StarRocks 实例释放参考。
释放实时计算 Flink 资源可参考:实时计算 Flink 版释放资源参考
释放OpenSearch-向量检索版资源可参考:OpenSearch-向量检索版计费参考。
释放DataWorks相关资源,可进入已购资源与服务释放资源组,释放更多资源参考:DataWorks商品停止使用参考。
释放PAI资源可参考:PAI资源退订参考。
释放OSS资源可参考:如何关闭OSS服务或停止计费。
释放数据湖构建DLF资源可参考:数据湖构建DLF计费模式。