项目分配与安全

在为企业级大数据平台创建项目时,建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目,对于ADS层的数据,按照应用的粒度建立项目项目分配 在本教程中,建议参考下图建立您的MaxCompute项目,图中的每一个方块代表一个项目。...

项目分配与安全

在为企业级大数据平台创建项目时,建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目,对于ADS层的数据,按照应用的粒度建立项目项目分配 在本教程中,建议参考下图建立您的MaxCompute项目,图中的每一个方块代表一个项目。...

通过跨项目数据访问实现不同地域MaxCompute项目数据...

本文为您介绍如何通过跨项目数据访问实现不同Region的MaxCompute项目数据迁移,包括两种使用场景:同云账号内不同Region的项目数据迁移;不同云账号间不同Region的项目数据迁移。使用限制 此方案只支持在中国内地地域间实现不同地域间的...

项目

MaxCompute提供项目数据保护机制,为数据安全提供保障。详情请参见 安全操作。MaxCompute提供跨项目的资源访问。一个用户可以同时拥有多个项目的权限。通过安全授权,可以在一个项目中访问另一个项目中的对象,详情请参见 基于Package跨...

场景:跨账号创建数据

详情请参见 创建MaxCompute数据源、创建Hologres数据源。...创建MaxCompute项目,详情请参见 创建MaxCompute项目。...说明 您可根据跨账号添加的数据源在A工作空间的使用场景,提前为RAM角色授权与相关权限,例如,若要在A工作空间查询B工作空间...

基于Package跨项目访问资源

Package是一种跨项目共享数据及资源的机制。A项目的所有者对其他项目需要使用的资源进行打包(也就是创建Package),然后许可其他项目安装此Package。其他项目的所有者安装Package之后,就可以自行管理Package是否需要进一步授权给自己项目...

MaxCompute+Hadoop搭建实践

本文以E-MapReduce的Hive为例,为您介绍在MaxCompute中如何创建外部...在DataWorks临时查询页面,查看外部项目数据。说明 DataWorks临时查询操作,详情请参见 DataWorks临时查询。命令示例:select*from external_project.testtbl1;返回结果:

操作审计事件数据迁移至MaxCompute

大数据计算服务项目Quota MaxCompute的 配额。说明 创建跟踪首次投递到MaxCompute时,需要选择MaxCompute的配额,若当前地域下无可选配额,请选择其他MaxCompute地域。选择 投递到其他账号,设置 大数据计算服务ARN 和 大数据计算服务写入...

项目管理(新版)

创建项目 MaxCompute控制台创建的Project允许被各客户端使用,DataWorks提供统一的全链路大数据开发治理平台,紧密的集成MaxCompute,其工作空间标准模式不支持绑定存量MaxCompute项目。推荐您直接通过DataWorks创建MaxCompute项目并进行...

创建MaxCompute项目

方式二:通过DataWorks控制台创建项目 DataWorks为阿里云提供的一站式大数据开发治理平台,您可以在DataWorks上进行MaxCompute作业开发、周期性调度、作业运维、数据治理等一站式数据开发治理操作,如果您希望后续使用DataWorks一站式开发...

MaxCompute项目设置RAM子账号为超级管理员

建议您只添加需要在当前项目进行数据开发(即会在当前项目执行作业)的用户为项目成员。对于有数据交互业务需求的用户,通过Package方式进行跨项目资源共享,避免将过多用户添加至项目内而增加了成员管理的复杂度。员工转岗或离职,需要先...

创建项目

由于开发和生产项目Owner都是同一个账号,请谨防通过发布任务到生产项目时,将生产项目表读写到开发项目再通过开发项目获取生产数据。业务场景二:创建仅实现查询、下载业务数据项目 场景需求 业务单一,成员角色基本一致,后续业务不会...

查看工作空间信息

单击 项目/数据库,即可进入项目或数据库的详情页,查看项目或数据库的 基础信息 及该项目或数据库中的表信息。您可在操作列收藏表,也可单击表名称进入表详情页,查看相应表的明细、产出及血缘等信息。更多表的管理操作,详情请参见 查看...

通过DataWorks实现MaxCompute跨项目迁移

编辑您新建的数据同步任务节点,其中数据源 WorkShop2023 是您的原始项目数据源 odps_source 代表您当前的新建项目,表名是您需要同步数据的表 ods_user_info_d。完成后单击 调度配置。单击 使用工作空间根节点 后,提交数据同步任务。补...

GetProject-获取项目信息

200 errorCode string 错误码 040002 errorMsg string 错误信息 error message.data object 返回数据 name string 项目名称 odps_project owner string 项目 owner 1565950907343451 type string 项目类型。取值:managed:内部项目。...

通过DataWorks实现MaxCompute跨项目迁移

编辑您新建的数据同步任务节点,其中数据源 WorkShop2023 是您的原始项目数据源 odps_first 代表您当前的新建项目,表名是您需要同步数据的表 ods_user_info_d。完成后单击 调度配置。单击 使用工作空间根节点 后,提交数据同步任务。补...

修改数据开发项目

调用ModifyFlowProject接口,修改数据开发项目。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String ...

删除数据开发项目

调用DeleteFlowProject接口,删除数据开发项目。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String ...

创建数据开发项目

调用CreateFlowProject接口,创建数据开发项目。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String ...

创建MaxCompute数据

若您要使用DataWorks进行MaxCompute任务的开发、管理,需先将您的MaxCompute项目创建为DataWorks的MaxCompute数据源。创建完成后,可在DataWorks的各功能模块使用该数据源连接MaxCompute项目,进行相应的数据同步、数据开发、数据分析等...

管理项目

本文介绍如何通过EMR OpenAPI创建数据开发项目并对项目进行管理。前提条件 已创建集群,详情请参见 创建集群。已获取集群ID,详情请参见 查看集群列表与详情。已创建AccessKey,详情请参见 获取AccessKey。已获取相应的SDK,Java SDK请参见...

项目管理

创建E-MapReduce集群后,您可以在数据开发中创建项目,并在项目中进行作业的编辑和工作流的调度。新建项目之后,您可以对项目进行管理,为项目关联集群资源、添加项目成员以及设置全局变量。前提条件 已创建集群,详情请参见 创建集群。...

CREATE PACKAGE

Package是一种跨项目共享数据及资源的机制。A项目的所有者对其他项目需要使用的资源进行打包(也就是创建Package),然后许可其他项目安装此Package。其他项目的所有者安装Package之后,就可以自行管理Package是否需要进一步授权给自己项目...

项目级别Information Schema

元数据及作业历史数据保存在Information Schema空间下,如果需要对历史数据进行快照备份或获得超过14天的作业历史,您可以定期将Information Schema的数据备份到指定项目。获取Information Schema服务 自2024年03月01日开始,MaxCompute...

发展历程

关键性里程碑 2009年9月,ODPS(即现在的MaxCompute)大数据平台飞天项目正式启动。2010年10月,阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月,平台的单集群规模已达到5000台。2014年7月,平台开始对外提供服务,完全替换...

跨地域灾备

以及在任何时候将新创建的项目数据备份到已经存在备份的任何其他地域,如果有链路不可见或报错,可以通过工单、您的专属钉群或MaxCompute开发者社区群(钉钉群号:11782920)联系我们。增量数据的定义是文件的元数据版本是否发生变化,如果...

权限命令集

本文为您介绍MaxCompute项目中的权限管理命令全集,包含用户管理、角色管理、用户或角色授权、权限查看等命令。角色管理 创建角色(项目级别)命令 create role[privilegeproperties("type"="admin|resource")];示例 创建一个Worker资源类...

添加体验空间数据库

数据表被项目引用,其中存在已发布项目:系统会提示用户有哪些已发布的项目引用了当前表,并提示用户不能直接删除,需要关闭项目的发布状态或删除项目对当前表的引用后才能删除。在删除弹窗中单击 确定,删除数据表。后续操作 新建项目

管理数据

本文介绍数据树的管理功能。...新建项目并添加 在数据树中选择需要添加的数据表,单击右下角的 新建项目并添加,等待系统自动创建项目并将当前已选中的数据添加至新创建的项目中。也可以单击 清空选择,去勾选已选中的数据表。

项目空间操作

odps.security.enabledownloadprivilege 设置项目是否开启Download权限控制方案,开启后能够对角色或用户使用Tunnel下载表和实例的行为进行管控,提升项目数据安全性,避免出现数据泄露情况。详情请参见 Download权限控制。true:开启...

删除表或MaxCompute项目

如果您不再需要示例数据或MaxCompute项目,可以删除数据或MaxCompute项目,以免产生不必要的资源浪费及账单费用。本文为您介绍如何删除表或MaxCompute项目。背景信息 您可以根据实际需要判断是否要保留示例数据及MaxCompute项目:如果需要...

权限管控与隔离

项目数据资产:包括是否可以通过角色获取当前项目内数据资产(如物理表、逻辑表)的各种权限(查表数据、改表数据、删除表等);数据资产权限通常是需要自定义项目角色的关键点,建议按照最小需求范围配置。发布运维:包括是否可以查看、...

权限管控与隔离

项目数据资产:包括是否可以通过角色获取当前项目内数据资产(如物理表、逻辑表)的各种权限(查表数据、改表数据、删除表等);数据资产权限通常是需要自定义项目角色的关键点,建议按照最小需求范围配置。发布运维:包括是否可以查看、...

ProjectProtection

开启或关闭项目空间的数据保护机制。您只能在项目空间中访问数据数据只能在项目空间内流动,不允许流出到项目空间之外,以提高数据的安全性。使用限制 本文中的命令您需要在 MaxCompute客户端 执行。本命令为CMD命令,仅支持在客户端...

使用CLONE TABLE实现同地域MaxCompute跨项目数据迁移

本文为您介绍如何通过CLONE TABLE功能实现同Region的MaxCompute项目数据迁移,包含两种使用场景:同Region同云账号内不同项目的数据迁移和同Region不同云账号间的项目数据迁移。CLONE TABLE功能介绍 CLONE TABLE功能可以高效地将源表中的...

对于外部项目的用户以及权限操作

未及时移除可能导致新同名对象继承旧策略的权限定义,允许原用户获得外部项目中的数据源新同名对象的非预期权限。授权命令 切换为External project。use;external_project_name 为External Project名称。如果使用RAM用户,需要在External ...

ListProjects-获取项目列表

项目所有者需要提前规划 Exception Policy,允许指定用户将指定对象的数据流出至指定项目,所有符合 Exception Policy 中描述的情形都可以打破数据保护机制。{"Version":"1","Statement":[{"Effect":"Allow","Principal":"","Action":[...

管理项目数据

浏览和更新项目数据 进入MaxCompute Studio页面,在左侧导航栏,单击 Project Explorer,即可浏览已连接的MaxCompute项目。单击 Tables&Views、Functions 或 Resources 节点前的下拉箭头,可以查看该项目下的所有表、视图、函数和资源。...

LIST TRUSTEDPROJECTS

在当前项目空间中查看已添加的可信的项目空间。命令格式 list ...ADD TRUSTEDPROJECT:在当前项目空间中添加可信的项目空间,通过项目互信的方式确保数据顺利流转。REMOVE TRUSTEDPROJECT:在当前项目中删除已添加的可信的项目

ADD TRUSTEDPROJECT

在当前项目空间中添加可信的项目空间,通过项目互信的方式确保数据顺利流转。命令格式 add trustedproject;参数说明 参数名称 是否必填 说明 project_name 是 待添加可信项目空间的名称。相关命令 ProjectProtection:开启项目空间的数据...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生大数据计算服务 MaxCompute 云数据库 RDS 云数据库 Redis 版 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用