简单上传示例
Tunnel SDK是MaxCompute提供的离线批量数据通道服务，主要提供大批量离线数据上传和下载。典型的表数据上传流程 创建表，如果是...说明 文中使用的是华东2经典网络Tunnel Endpoint，其他Region的Tunnel Endpoint设置可以参考文档 Endpoint。
多线程下载示例
本文通过代码示例向您介绍如何使用TableTunnel接口实现多线程下载，暂不支持其他接口使用多线程下载。import java.io.IOException;...文中使用的是华东2经典网络Tunnel Endpoint，其他region的Tunnel Endpoint设置可以参考文档 配置Endpoint。
MaxCompute数据源
Region 所在城市 开服状态 VPC网络Endpoint VPC网络Tunnel Endpoint 华东1 杭州 已开服 http://service.cn-hangzhou.maxcompute.aliyun-inc.com/api http://dt.cn-hangzhou.maxcompute.aliyun-inc.com 华东2 上海 已开服 ...
Endpoint
地域 所在城市 开服状态 VPC网络Endpoint VPC网络Tunnel Endpoint 中国 华东1（杭州）已开服 http://service.cn-hangzhou-vpc.maxcompute.aliyun-inc.com/api http://dt.cn-hangzhou-vpc.maxcompute.aliyun-inc.com 中国 华东2（上海）已开...
添加MaxCompute数据源
Region 所在城市 开服状态 VPC网络Endpoint VPC网络Tunnel Endpoint 华东1 杭州 已开服 http://service.cn-hangzhou.maxcompute.aliyun-inc.com/api http://dt.cn-hangzhou.maxcompute.aliyun-inc.com 华东2 上海 已开服 ...
简单下载示例
} } 说明 上述示例给出的是华东2经典网络Tunnel Endpoint，其他region的Tunnel Endpoint设置请参见 Endpoint。本例中，为方便测试，数据通过 System.out.println 直接打印出来。在实际使用时，您可改写为直接输出到文本文件。使用...
MaxCompute
http://dt.cn-shenzhen.maxcompute.aliyun-inc.com",#MaxCompute的VPC网络Tunnel Endpoint。spark_on_maxcompute",#MaxCompute的工作空间名称。sparktest",#MaxCompute的数据表名。2"#MaxCompute数据表的分区数。file":"oss:/spark_...
使用Tunnel命令或Tunnel SDK
Resume：因为网络或Tunnel服务的原因造成上传出错，可以通过 Resume 命令对文件或目录进行续传。可以继续上一次的数据上传操作，但Resume命令暂时不支持下载操作。更多信息请参见 Resume。使用Tunnel命令上传数据的具体操作请参考 Tunnel...
Tunnel常见错误码
说明 如果您通过外网设备访问经典网络或VPC网络的Tunnel Endpoint，或者通过经典网络或VPC网络设备访问外网的Tunnel Endpoint，有可能网络不通。原因二的解决措施：通过 MaxCompute客户端 或 DataWorks客户端 执行 desc extended 命令，...
使用说明
Resume：因为网络或Tunnel服务的原因造成上传出错，可以通过 Resume 命令对文件进行续传。可以继续上一次的数据上传操作，但Resume命令暂时不支持下载操作。更多信息请参见 Resume。Show：显示历史任务信息。更多信息请参见 Show。Purge：...
Tunnel命令
当您需要在本地环境与MaxCompute之间传输大量的数据时，MaxCompute提供Tunnel功能支持上传下载数据，使用Tunnel命令可以实现批量或增量数据的高效上传、下载，以提高数据传输效率和可靠性。本文为您介绍Tunnel上传下载命令的详细说明。...
Tunnel命令
当您需要在本地环境与MaxCompute之间传输大量的数据时，MaxCompute提供Tunnel功能支持上传下载数据，使用Tunnel命令可以实现批量或增量数据的高效上传、下载，以提高数据传输效率和可靠性。本文为您介绍Tunnel上传下载命令的详细说明。...
从MaxCompute外表导入（20.3及以上）
说明 如何查看VPC网络的 tunnel-endpoint，请参见 Endpoint。project-name MaxCompute项目名称。table-name MaxCompute外表名。partition-spec MaxCompute分区。access-key-id 访问MaxCompute项目的AccessKey ID。access-key-secret 访问...
使用ODPS Foreign Table访问MaxCompute数据
推荐配置阿里云经典网络或VPC网络的Tunnel Endpoint，如果使用VPC地址，请确保 AnalyticDB PostgreSQL版 与ODPS在同一可用区中。通过配置外网Tunnel Endpoint地址访问MaxCompute 数据，价格为0.8元/GB。关于ODPS Endpoint，请参见 配置...
数据传输服务概述
数据传输服务是MaxCompute数据进出的最重要通道，其中包括适用于批量操作的普通Tunnel和适用于流式写入的Stream Tunnel，同时在所有Region提供免费限量使用的数据传输服务共享资源组，也提供数据传输服务（包年包月）独享资源组，供您采购...
数据传输服务（上传）场景与工具
当上传的数据量较大时，建议配置Tunnel Endpoint为经典网络或VPC网络相应的Tunnel Endpoint。经典网络或VPC网络需要通过阿里云ECS连通或者通过网络专线开通。如果上传数据速度太慢，可以考虑使用多线程上传方式。更多Tunnel Endpoint信息，...
Tunnel命令常见问题
使用Tunnel Upload命令上传数据时，设置了经典网络的Endpoint，但为什么会连接到外网的Tunnel Endpoint？在DataStudio上执行Tunnel Upload命令上传分区数据时报错，如何解决？使用Tunnel Upload命令上传数据时，如果数据中有回车或空格，为...
安装并登录MaxCompute本地客户端
如果您未配置Tunnel Endpoint，Tunnel会自动路由到MaxCompute服务所在网络对应的Tunnel Endpoint。如果您配置了Tunnel Endpoint，则以配置为准，不进行自动路由。各地域及网络对应的Tunnel Endpoint值，请参见 Endpoint。...
计费命令参考
语法表达式 用途 是否收费 样例 TUNNEL DOWNLOAD 下载数据（经典网络）否 TUNNEL DOWNLOAD table_name e:/table_name.txt;配置经典网络Endpoint：http://dt.cn-shanghai.maxcompute.aliyun-inc.com Endpoint的配置，请参见 配置Endpoint。...
迁移服务（MMA）
如果您未配置Tunnel Endpoint，Tunnel会自动路由到MaxCompute服务所在网络对应的Tunnel Endpoint。如果您配置了Tunnel Endpoint，则以配置为准，不进行自动路由。各地域及网络对应的Tunnel Endpoint值，请参见 Endpoint。source_id 否 数据...
使用本地客户端（odpscmd）连接
如果您未配置Tunnel Endpoint，Tunnel会自动路由到MaxCompute服务所在网络对应的Tunnel Endpoint。如果您配置了Tunnel Endpoint，则以配置为准，不进行自动路由。各地域及网络对应的Tunnel Endpoint值，请参见 Endpoint。...
运行失败
建立DownloadSession失败 ErrorCode=Local Error,ErrorMessage=Failed to create download session with tunnel endpoint 解决方法 该问题的主要是Proxima CE内部调用MaxCompute关于Tunnel的某些接口失败导致的，存在的原因有：网络问题，...
从MaxCompute外表导入（19.15.2.2）
说明 为了确保ClickHouse后端节点与您的MaxCompute服务之间网络通畅，tunnel-endpoint 必须是VPC网络类型的endpoint，且MaxCompute必须与您的ClickHouse实例在同一地域，比如都在上海Region。查看MaxCompute tunnel endpoint地址请参见 ...
数据通道服务连接
DataHub和Tunnel在不同网络环境场景下，所使用的EndPoint会有所区别。您在不同网络环境下，需要选择不同的服务地址（Endpoint）来连接服务，否则将无法向服务发起请求。同时，不同的网络连接也会对您的 计费 产生影响。具体的服务连接地址...
使用说明
各地域及网络对应的Tunnel Endpoint值，请参见 Endpoint。日志配置参数。URL key Property Key 是否必选 描述 enableOdpsLogger enable_odps_logger 否 是否启用MaxCompute JDBC Logger。取值说明：False（默认值）：不启用，JDBC将不记录...
使用Flink写入数据（Transaction Table2.0）
OdpsConf odpsConfig=new OdpsConf("accessid","accesskey","endpoint","project","tunnel endpoint");OdpsPipeline.Builder builder=OdpsPipeline.builder();builder.projectName("sql2_isolation_2a").tableName("user_ledger_portfolio...
使用Kafka（离线与实时）
如果您未配置Tunnel Endpoint，Tunnel会自动路由到MaxCompute服务所在网络对应的Tunnel Endpoint。如果您配置了Tunnel Endpoint，则以配置为准，不进行自动路由。各地域及网络对应的Tunnel Endpoint值，请参见 Endpoint。project 是 访问的...
建立VPC到本地数据中心的连接（双隧道模式和BGP路由）
本文介绍如何使用公网网络类型的VPN网关在专有网络VPC（Virtual Private Cloud）和本地数据中心之间建立IPsec-VPN连接（双隧道模式），实现本地数据中心与VPC之间加密通信以及IPsec-VPN连接的高可用。同时，使用BGP动态路由协议实现路由...
建立多条私有IPsec-VPN连接实现私网流量的负载分担
本文介绍如何在本地数据中心IDC（Internet Data Center）和专有网络VPC（Virtual Private Cloud）之间建立多条私网IPsec-VPN连接，在实现本地IDC和VPC之间私网流量加密通信的同时通过ECMP（Equal-Cost Multipath Routing）链路实现私网流量...
建立多条公网IPsec-VPN连接实现流量的负载分担
本文介绍如何在本地数据中心IDC（Internet Data Center）和专有网络VPC（Virtual Private Cloud）之间建立多条公网IPsec-VPN连接，通过ECMP（Equal-Cost Multipath Routing）链路实现本地IDC和VPC之间流量的负载分担。场景示例 本文以上图...
基于多个VPN网关建立高可用的IPsec-VPN连接（负载分担...
如果本地数据中心拥有多个本地网关设备（本地网关设备上均拥有公网IP地址），您可以使用其中的2个本地网关设备分别与阿里云专有网络VPC（Virtual Private Cloud）建立IPsec-VPN连接，每个IPsec-VPN连接关联不同的VPN网关，实现本地数据中心...
建立VPC到本地数据中心的连接（单隧道模式和BGP路由）
本文介绍如何使用公网网络类型的VPN网关在专有网络VPC（Virtual Private Cloud）和本地数据中心之间建立IPsec-VPN连接（单隧道模式），并通过BGP动态路由协议自动学习路由实现VPC与本地数据中心间的资源互通，降低网络维护成本和网络配置...
ALIYUN:VPC:VpnAttachment
示例值：{"IpsecEncAlg":"aes","IpsecAuthAlg":"sha1","IpsecPfs":"group2","IpsecLifetime":86400} NetworkType String 否 否 IPsec连接的网络类型。取值：public（默认值）：公网，表示IPsec连接通过公网建立加密通信通道。private：私网...
建立VPC到VPC的IPsec-VPN连接（双隧道模式）
本文介绍如何使用IPsec-VPN（双隧道模式）在两个专有网络VPC（Virtual Private Cloud）之间建立安全连接，实现两个VPC内的资源互访。场景示例 说明 VPN网关不支持建立跨境连接。使用IPsec-VPN建立VPC和VPC之间的连接时，两个VPC必须同属于...
数据动态脱敏
申请网络白名单。阿里云主账号填写 表单 申请MaxCompute项目访问外部网络，开通后才可调用脱敏服务。如果目标IP或域名不存在安全限制，审核通过后即可访问目标IP或域名，审核周期为3个工作日之内。申请内容格式如下：项目名称（待脱敏的...
使用国密型VPN网关实现VPC互通
本文介绍如何使用国密型VPN网关在两个专有网络VPC（Virtual Private Cloud）之间建立IPsec-VPN连接（双隧道模式），实现两个VPC内的资源互访。场景示例 本文以下述场景为例。某企业在华东1（杭州）地域拥有VPC1、在华东2（上海）拥有VPC2。...
通过SQL导出数据至MaxCompute
注意事项 在Hologres中使用SQL导出数据至MaxCompute需要注意如下事项：支持跨区域导出至MaxCompute，但因为网络原因，同一个区域导出的性能会更好。当前Hologres仅支持一级分区，但是可以导出至MaxCompute的二级分区，但是需要MaxCompute的...
Hologres数据源
endpoint 包括经典网络、公网和VPC三种网络类型，请根据数据集成资源组和Hologres实例所在的网络环境选择正确的 endpoint 类型，否则会出现网络不通或者性能受限的情况：经典网络示例：instance-id-region-endpoint-internal.hologres....
实践示例：MaxCompute底层脱敏使用方法
操作流程 在MaxCompute项目中使用动态脱敏功能的操作流程如下：步骤一：准备待使用脱敏的项目 步骤二：开通数据保护伞服务 步骤三：申请网络白名单 步骤四：为目标MaxCompute项目开启数据脱敏功能 步骤五：查询SQL显示结果 步骤一：准备待...
云边运维通道FAQ
kubectl get svc-n kube-system|grep tunnel-server-svc 预期输出：x-tunnel-server-svc LoadBalancer 172.16.XX.XX 47.99.XX.XX 10262:30164/TCP 47h 在边缘节点上检查与tunnel-server的网络连通性，您可以通过 ping 47.99.XX.XX 查看网络...
- 产品推荐
- 这些文档可能帮助您