Tunnel操作
MaxCompute通过Tunnel实现上传下载数据功能。本文为您介绍如何通过Tunnel上传、下载数据。Tunnel操作详情请参见 Tunnel命令。Tunnel操作常用命令如下。类型 功能 角色 操作入口 上传数据 将本地文件的数据上传至MaxCompute的表中，以追加...
Tunnel命令
当您需要在本地环境与MaxCompute之间传输大量的数据时，MaxCompute提供Tunnel功能支持上传下载数据，使用Tunnel命令可以实现批量或增量数据的高效上传、下载，以提高数据传输效率和可靠性。本文为您介绍Tunnel上传下载命令的详细说明。...
Tunnel命令
当您需要在本地环境与MaxCompute之间传输大量的数据时，MaxCompute提供Tunnel功能支持上传下载数据，使用Tunnel命令可以实现批量或增量数据的高效上传、下载，以提高数据传输效率和可靠性。本文为您介绍Tunnel上传下载命令的详细说明。...
edge-tunnel
版本号 镜像地址 变更内容 变更时间 变更影响 v0.10.3 edge-tunnel-server：registry.cn-hangzhou.aliyuncs.com/acs/edge-tunnel-server:v0.10.3 edge-tunnel-agent ：registry.cn-hangzhou.aliyuncs.com/acs/edge-tunnel-agent:v0.10.3...
使用Tunnel命令或Tunnel SDK
MaxCompute的客户端（odpscmd）、Studio等数据上传下载工具均通过Tunnel功能实现数据的上传与下载，本文为您介绍如何使用Tunnel命令或Tunnel SDK上传数据至MaxCompute。前提条件 已经创建好MaxCompute项目，并用对应的工具连接MaxCompute。...
Tunnel常见错误
本文为您介绍Tunnel异常信息格式以及常见问题。错误信息格式 通常，Tunnel的错误信息如下。requestId=request_id,ErrorCode=InvalidArgument,ErrorMessage=Invalid argument 涉及的信息如下：requestId 是标识用户请求的唯一标识。...
Tunnel SDK常见问题
本文为您介绍使用Tunnel SDK过程中的常见问题。问题类别 常见问题 Tunnel SDK Upload 使用Tunnel SDK上传数据时，上传的数据可以自动分配到各个分区吗？使用Tunnel SDK上传数据时，编写完UDF打成JAR包后上传，对JAR包大小有要求吗？使用...
alicloud_ots_tunnel
Provides an OTS tunnel resource.For information about OTS tunnel and how to use it,see Tunnel overview.->NOTE:Available since v1.172.0.Example Usage variable"name"{ default="tf-example"} resource"random_integer""default"{ ...
Tunnel命令常见问题
本文为您介绍使用Tunnel命令过程中的常见问题。问题类别 常见问题 Tunnel Upload Tunnel Upload是否支持通配符或正则表达式？Tunnel Upload对文件大小是否有限制？记录大小是否有限制？是否要使用压缩？同一个表或分区是否可以并行上传数据...
Tunnel常见错误码
本文为您介绍使用Tunnel过程中的常见错误码，帮助您了解错误码产生原因，并提供解决措施。Tunnel常见错误码如下：报错信息：ErrorCode=NoSuchPartition,ErrorMessage=The specified partition does not exist.报错信息：ErrorCode=...
Tunnel SDK示例汇总引导
本文向您引导介绍使用Tunnel SDK的典型示例，您可在本文查看典型场景SDK示例的文档链接，如不在本文罗列的典型场景中，您也可以前往开源Tunnel SDK文档中查看更多其他示例。注意事项 MaxCompute提供了两个服务地址供您选择：Tunnel服务地址...
Streaming Tunnel SDK示例（Python）
Streaming Tunnel是MaxCompute的流式数据通道，您可以通过Streaming Tunnel向MaxCompute中上传数据，本文为您介绍使用Python版Streaming Tunnel SDK上传数据的简单示例。注意事项 Streaming Tunnel仅支持上传数据，下文为您介绍一个简单的...
通过Tunnel迁移日志数据至MaxCompute
本文为您介绍如何通过Tunnel上传日志数据至MaxCompute。前提条件 安装MaxCompute客户端，详情请参见 安装并配置MaxCompute客户端。将日志数据保存至本地。本文使用的示例数据为 loghub.csv。背景信息 Tunnel是MaxCompute的批量上传数据工具...
Tunnel SDK示例（Python）
Tunnel是MaxCompute的数据通道，您可以通过Tunnel向MaxCompute中上传或者下载数据，TunnelSDK是PyODPS的一部分，本文为您介绍使用Python版TunnelSDK上传下载数据的简单示例。注意事项 下文为您介绍简单的上传、下载数据的Python SDK示例，...
使用MaxCompute独享Tunnel进行数据同步
注意事项 若在配置MaxCompute数据源时配置了 Tunnel Endpoint 属性，则在DataWorks上配置同步任务时，不支持指定独享传输资源组，实际同步任务运行时会使用指定地址对应的传输资源。若同步任务需要使用独享传输资源，则您在配置MaxCompute...
概述
MaxCompute Tunnel是MaxCompute的数据通道，您可以通过Tunnel向MaxCompute中上传或者下载数据。MaxCompute提供的 数据上传和下载工具 是基于Tunnel SDK编写的。本文将为您介绍Tunnel SDK的主要接口，不同版本的SDK在使用上有所差别，准确...
使用说明
本文为您介绍Tunnel命令的功能和如何通过Tunnel命令上传下载数据。支持的工具 MaxCompute支持使用odpscmd和MaxCompute Studio运行Tunnel命令。具体操作请参见 使用客户端（odpscmd）连接 和 认识MaxCompute Studio。Tunnel命令功能 您可以...
使用客户端（odpscmd）或Studio
MaxCompute的客户端（odpscmd）、Studio等数据上传下载工具均通过Tunnel功能实现数据的上传与下载，本文为您概要介绍如何在对应的工具中使用Tunnel命令或Tunnel SDK上传数据至MaxCompute。使用Tunnel命令下载数据 Tunnel命令主要有 Upload...
增量同步性能白皮书
通过本文您可以了解Tunnel增量性能测试的测试环境、测试工具、测试方案、测试指标、测试结果概述以及测试细则等。测试环境 表格存储实例 实例类型：高性能实例 实例地域：华东1（杭州）实例地址：私网地址，避免网络的不确定性因素对测试...
导入数据
本文为您介绍如何通过MaxCompute客户端，使用Tunnel Upload将本地数据文件中的数据导入创建好的表中。前提条件 请确认您已满足如下条件：已创建表。更多创建表操作，请参见 创建表。已将CSV或TXT数据文件下载至本地。本文提供的数据文件样...
上传全量数据
MaxCompute提供了多种数据同步的方式，可以通过DataWorks的数据集成功能，也可以通过tunnel命令的方式。更新详情见：通用数据上传场景与工具。本文以示例的全量数据为例，说明如何将数据通过tunnel本地上传至MaxCompute项目中。操作步骤 ...
导入导出表数据
前提条件 导入导出数据使用MaxCompute Tunnel，因此要求MaxCompute Studio中添加的MaxCompute项目必须配置了Tunnel。详情请参见 安装并配置MaxCompute客户端。导入导出使用的账号必须具备MaxCompute项目中表的操作权限。导入数据 在 ...
Dataphin中将MaxCompute数据同步到MySQL数据库，运行...
问题描述 Dataphin中将MaxCompute数据同步到MySQL数据库，运行报错“ErrorCode=MethodNotAllowed,ErrorMessage=schema evolution table operations through tunnel is disabled”。完整异常如下：2022-06-02 14:38:30.029[job-0]ERROR ...
alicloud_ots_tunnels
This data source provides the ots tunnels of the current Alibaba Cloud user.For information about OTS tunnel and how to use it,see Tunnel overview.->NOTE:Available in v1.172.0+.Example Usage data"alicloud_ots_tunnels"...
数据消费框架原理
Tunnel Client为通道服务的自动化数据消费框架。使用通道服务前，需要了解Tunnel Client的自动化数据处理流程、自动化的负载均衡和良好的水平扩展性以及自动化的资源清理和容错处理。背景信息 Tunnel Client可以解决全量和增量数据处理时的...
远程登录进程说明
本文以C Link SDK中的Demo文件./demos/tunnel_basic_demo.c 为例，介绍业务进程与远程登录进程隔离中远程登录运维进程的处理过程以及相关日志。流程图 操作步骤 初始化。创建1个实例并内部初始化默认参数*/void*tunnel_handle=aiot_tunnel_...
远程登录
步骤4：隧道建连/*隧道未建连，异步完成隧道建连,在事件回调函数中重置tunnel_status状态*/aiot_tunnel_connect(tunnel_handle);步骤5：建立SSH会话 在 远程登录 页签，单击 登录。在对话框中，输入设备远程访问的用户名和密码，单击 确定...
快速开始
由于Tunnel的增量日志最多会保留7天（具体的值和数据表的Stream的日志过期时间一致），因此在使用全量加增量类型或者增量类型的Tunnel消费数据时，会出现如下情况：当Tunnel处于全量阶段时，如果全量数据在7天内没有消费完成，则此Tunnel会...
alicloud_vpn_connection
bgp_config { local_asn="1219002"tunnel_cidr="169.254.30.0/30"local_bgp_ip="169.254.30.1"} tunnel_ike_config { ike_mode="aggressive"ike_version="ikev2"local_id="localid_tunnel2"psk="12345678"remote_id="remote2"ike_auth_alg=...
- 产品推荐
- 这些文档可能帮助您