读取文本文件内容
组件配置示例 在 目标文件路径 中，填写“D:\data\新建文本文档.txt”在 读取方式 中，选择单选框选项为“按行读取整个文本文件”在 文件编码 中，选择下拉框选项为“GBK”高级选项保持默认值 4.2.示例执行结果 如下图所示，该流程成功执行...
集群吞吐性能测试
将500个大小为4 GB的文件按顺序写入到 文件存储 HDFS 版，读写数据的缓存大小为8 MB，并将统计数据写入/tmp/TestDFSIOwrite.log 中。hadoop jar./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.6-tests.jar TestDFSIO-...
FTP数据源
您必须保证读取文件为类CSV格式，并且提供给数据同步系统权限可读。如果Path指定的路径下没有符合匹配的文件抽取，同步任务将报错。是 无 column 读取字段列表，type指定源数据的类型，index指定当前列来自于文本第几列（以0开始），value...
C++ 合约开发说明
蚂蚁区块链智能合约平台基于 WebAssembly 开发，提供一套基于 C99/C++14 标准的 C++ 语言子集作为合约语言。合约开发者通过编译工具（mychain.mycdt）将合约代码编译成 wasm 字节码，由合约平台区块链节点对 wasm 字节码进行解释执行。本...
读取数据
表格存储 提供了GetRow接口用于读取单行数据以及BatchGetRow、GetRange等接口用于读取多行数据。说明 组成表的基本单位为行，行由主键和属性列组成。其中主键是必须的，且每一行的主键列的名称和类型相同；属性不是必须的，且每一行的属性...
NAS存储卷FAQ
Operation not permitted 使用NAS动态存储卷时，Controller的任务队列已满且无法创建新的PV NAS存储卷挂载时间延长 使用NAS存储卷时，无法创建或修改目录 当工作负载挂载NAS存储卷时，提示unknown filesystem type"xxx"读写文件时，...
OSS SDK使用中常见问题的解决方法
OSS.NET SDK异常处理 Browser.js OSS Browser.js SDK的常见报错 Go语言 对象存储OSS使用Go语言实现签名Header上传的示例 Go SDK的错误处理 C#对象存储OSS使用C#语言实现签名Header上传的示例 C OSS C SDK常见错误 Android OSS Android SDK...
常见问题
Go 对象存储OSS使用Go语言实现签名Header上传的示例 Go错误处理 C#对象存储OSS使用C#语言实现签名Header上传的示例 C C错误处理 Android OSS Android SDK断点续传失败之后无法进入onFailure回调的问题 Android异常处理 Android常见问题 iOS...
离线预测通用说明
同时，支持读取OSS文件列表进行预测，并将结果写回OSS文件中。整个离线处理过程被抽象为一个流水线处理流程，每个原子过程在每个Worker上异步多线程并发处理。不同Worker在IO时，通过数据分片获取对应的输入数据，写出对应的输出分片。例如...
读取数据
表格存储 提供了单行读取、批量读取、范围读取、迭代读取和并行读取的查询方式用于读取数据表中数据。数据写入到数据表后，您可以选择所需数据查询方式进行数据读取。如果需要了解 表格存储 各场景的应用案例，请参见 快速玩转Tablestore...
OSS存储读写分离最佳实践
缓存命中时，ossfs重复读取文件时，将通过内核缓冲区高速缓存处理，仅使用未被其他进程使用的可用内存。parallel_count 以分片模式上传或下载大文件时，分片的并发数，默认值为20。max_multireq 列举文件时，访问文件元信息的最大并发数。...
生命周期管理概述
当您需要频繁访问低频存储或归档存储中的文件时，文件存储NAS支持文件或目录取回操作，避免频繁读写文件产生过多的读写费用。价格低廉，享受高品质无忧存储服务 例如，通用性能型NAS文件系统在开启低频存储后，相对于原通用性能型NAS文件...
配置FTP输入组件
文件不存在时 忽略：当读取的文件不存在时，忽略该文件，并继续读取其他文件。置任务失败：当读取的文件不存在时，终止该任务并置失败。数据内容起始行 设置输入组件读取数据的起始行。默认为1，从第一行开始为数据内容。若需忽略前N行，则...
配置FTP输入组件
文件不存在时 忽略：当读取的文件不存在时，忽略该文件，并继续读取其他文件。置任务失败：当读取的文件不存在时，终止该任务并置失败。数据内容起始行 设置输入组件读取数据的起始行。默认为1，从第一行开始为数据内容。若需忽略前N行，则...
环境要求与配置
开发环境 C Link SDK可实现跨平台的移植，对开发环境要求灵活，只需支持以下条件：开发语言：C99标准的C语言。开发工具：不限。支持C语言编译即可。编译框架：CMake编译。编译 设置交叉编译 修改 CMakeLists.txt，设置交叉编译工具链。重要...
环境说明
开发环境 C Link SDK可实现跨平台的移植，对开发环境要求灵活，只需支持以下条件：开发语言：C99标准的C语言。开发工具：不限。支持C语言编译即可。编译框架：Makefile编译。编译与运行 在Linux和macOS环境下，完成Link SDK配置后，您可以...
功能特性
基本概念 POSIX协议 Linux操作系统用来访问文件的一套标准接口，可在应用程序中使用编程语言调用，实现对文件的各种操作。基本概念 客户端 加速客户端 阿里云NAS提供的加速客户端为应用提供了接近本地文件系统的小文件操作性能和计算端分布...
函数计算只支持Node.js，用C++写的程序怎么运行？
当前函数计算支持的编程语言详情请参见 开发语言列表，如果您的程序是用函数计算还未支持的语言实现的，您可以采用以下做法：用函数计算支持的语言改写。Node.js、Python等语言包含了非常丰富的类库，开发效率很高。使用 Custom Runtime ...
函数计算只支持Node.js，用C++写的程序怎么运行？
如果您的程序使用 函数计算 还未支持的语言实现，您可以采用以下做法：用 函数计算 支持的语言改写。Node.js、Python等语言包含了非常丰富的类库，开发效率较高。使用 Custom Runtime 自定义开发环境。将C/C++等程序编译为可执行文件，通过...
配置HDFS输入组件
HDFS输入组件用于读取HDFS数据源的数据。同步HDFS数据源的数据至其他数据源的场景中，您需要先配置HDFS输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置HDFS输入组件。前提条件 已创建HDFS数据源，如何创建，请...
通过ASM实现gRPC链路追踪
Java语言读取和写入Headers是通过两个拦截器分别实现的，因此propagate Headers无法在一个顺序的流程里实现，且考虑到并发因素，以及只有读取拦截器知道链路追踪的唯一ID，所以无法通过最直觉的缓存方式搭建两个拦截器的桥梁。Java语言的...
通过ASM实现gRPC链路追踪
Java语言读取和写入Headers是通过两个拦截器分别实现的，因此propagate Headers无法在一个顺序的流程里实现，且考虑到并发因素，以及只有读取拦截器知道链路追踪的唯一ID，所以无法通过最直觉的缓存方式搭建两个拦截器的桥梁。Java语言的...
HDFS数据源
说明 实际启动的并发数是您的HDFS待读取文件数量和您配置作业并发数两者中的小者。当指定通配符，HDFS Reader尝试遍历出多个文件信息。例如指定/代表读取/目录下所有的文件，指定/bazhen/代表读取bazhen目录下游所有的文件。HDFS Reader...
EFC加速NAS或CPFS文件访问
说明 读取文件耗时和吞吐量可能随运行环境和测量方式而变化。本文是在一个有着三个ECS节点且节点实例规格均为ecs.g7ne.8xlarge的ACK集群中获取的数据结果。其中，efc-demo的3个分布式缓存Worker Pod均运行于一个ECS节点上，并且efc-app ...
CREATE PROCEDURE
obj_file,link_symbol 当 C 语言源码中的过程名与 SQL 过程的名称不同时，这种形式的 AS 子句被用于动态可装载的 C 语言过程。字符串 obj_file 是包含已编译好的 C 过程的共享库文件名，并且被按照 LOAD 命令的方式解析。字符串 link_...
使用DBFS静态存储卷
kubectl exec-it dbfs-test-5b5cdb85f*-sh-c"echo hello>/data/test.txt"执行以下命令，在另一个Pod中读取文件。kubectl exec-it dbfs-test-c5bb4746c*-cat/data/test.txt 预期输出：hello 预期输出表明，DBFS存储卷可以实现多个Pod的共享...
迁移场景
自研软件使用的编程语言主要包含以下两类：编译型语言：以C++/Go为代表的编译型语言，这些语言会将源代码编译成架构相关的二进制文件，因此迁移后必须进行重新编译。更多信息，请参见 Make/CMake构建文件 和 C/C++语言迁移。解释型语言：以...
使用DBFS动态存储卷
kubectl exec-it dbfs-test-5b5cdb85f*-sh-c"echo hello>/data/test.txt"执行以下命令，在另一个Pod中读取文件。kubectl exec-it dbfs-test-c5bb4746c*-cat/data/test.txt 预期输出：hello 预期输出表明，DBFS存储卷可以实现多个Pod的共享...
建立设备与平台的连接
可以使用如下命令行安装：sudo apt-get install-y build-essential make gcc 操作步骤 获取设备端C语言SDK。登录 物联网平台控制台。在控制台左上方，选择物联网平台所在地域，然后在 实例概览 页签，单击 公共实例。在左侧导航栏单击 文档...
GetRow
调用GetRow接口根据指定的主键读取单行数据。请求消息结构 message GetRowRequest { required string table_name=1;required bytes primary_key=2;Plainbuffer编码为二进制。repeated string columns_to_get=3;不指定则读出所有的列。...
获取C Link SDK
LinkSDK/external 该文件夹内含 mbedtls 的C语言库。当需要使用TLS功能时，SDK使用了第三方的 mbedtls，您可以使用其它的TLS库。LinkSDK/Makefile 需要编写的Makefile文件，以编译SDK。LinkSDK/portfiles SDK运行时，需实现的TCP/IP协议栈...
PAI-TF数据IO方式介绍
import csv csv_reader=csv.reader(open('csvtest.csv'))for row in csv_reader:print(row)不建议使用第三方库读取文件的方式。使用第三方库（如TFLearn、Pandas）的数据IO方式读取数据。通常，第三方库是通过封装Python的读取方式实现，...
性能说明FAQ
通过在文件系统写入空洞文件或使用Truncate命令生成一个文件来增加文件系统使用容量，从而提升文件系统的读写吞吐。同时，空洞文件和Truncate命令生成的文件在阿里云NAS上占用实际容量，按实际大小计费。更多信息，请参见 通用型NAS计费。...
连接方式概述
使用 Oracle 的 OCI 编写的 C 语言时，无需修改源代码，只需在链接时指定运行时库为 OBCI 库，该库文件默认安装到/u01/obclient/lib 路径下。OBCI 驱动安装包请联系技术支持获取。使用 C 语言连接 OceanBase 数据库的具体操作示例请参见 C ...
MQTT连接签名示例
开发语言 代码示例 签名算法文件 Java aiot-java-demo MqttSign.java C#aiot-csharp-demo MqttSign.cs C aiot_c_demo aiot_mqtt_sign.c Go aiot-go-demo MqttSign.go Android aiot-android-demo AiotMqttOption.java Python aiot-python-...
vfs
flags：打开操作模式 返回值 文件描述符：成功失败 flags:参数 描述 O_RDONLY 只读方式打开文件 O_WRONLY 只写方式打开文件 O_RDWR 以读写方式打开文件 O_CREAT 如果要打开的文件不存在，则建立该文件 O_APPEND 当读写文件时会从文件尾开始...
配置OSS输入组件
文件编码 读取文件的编码配置。系统支持的 文件编码 包括 UTF-8 和 GBK。null值 将要表示为空的字段填入文本框，如果源端存在则将对应的部分转换为空。压缩格式 文本压缩类型，默认不填写（即不压缩）。系统支持的压缩格式包括：zip gzip ...
Parquet（推荐）
Parquet提供列压缩从而可以节省空间，而且它支持按列读取而非整个文件的读取。作为一种文件格式，Parquet与Apache Spark配合的很好，而且实际上也是Spark的默认文件格式。我们建议将数据写到Parquet以方便长期存储，因为从Parquet文件读取...
配置OSS输入组件
文件编码 读取文件的编码配置。系统支持的 文件编码 包括 UTF-8 和 GBK。null值 将要表示为空的字段填入文本框，如果源端存在则将对应的部分转换为空。压缩格式 文本压缩类型，默认不填写（即不压缩）。系统支持的压缩格式包括：zip gzip ...
CSV文件
Both header true，false false 一个布尔标记符，用于声明文件中的第一行是否为列的名称 Both escape 任意字符窜 \ 用于转译的字符 Both inferSchema true，false false 指定在读取文件时spark是否推断列类型 Both ignoreLeadingWhiteSpace...
- 产品推荐
- 这些文档可能帮助您