开发PyODPS 3任务

DataWorks为您提供PyODPS 3节点,您可以在该节点中直接使用Python代码编写MaxCompute作业,并进行作业的周期性调度。本文为您介绍如何通过DataWorks实现Python任务的配置与调度。前提条件 已创建PyODPS 3节点,详情请参见 创建并管理...

开发PyODPS 3任务

DataWorks为您提供PyODPS 3节点,您可以在该节点中直接使用Python代码编写MaxCompute作业,并进行作业的周期性调度。本文为您介绍如何通过DataWorks实现Python任务的配置与调度。前提条件 已创建PyODPS 3节点,详情请参见 创建并管理...

开发PyODPS 2任务

PyODPS 2底层Python语言版本为Python 2,PyODPS 3底层Python语言版本为Python 3,请您根据实际使用Python语言版本创建PyODPS节点。使用限制 DataWorks建议您在PyODPS节点内获取到本地处理的数据不超过50 MB,该操作受限于DataWorks执行...

开发PyODPS 2任务

PyODPS 2底层Python语言版本为Python 2,PyODPS 3底层Python语言版本为Python 3,请您根据实际使用Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系,即数据血缘在数据地图无法正常展示,您可在任务代码...

创建自定义层

通过 OSS 上传层:选择上传构建层的ZIP文件的 Bucket 名称 和 文件名称。在线构建依赖层:选择 构建环境 并上传构建层的依赖文件 package.json 或 requirements.txt。说明 目前仅Python和Node.js运行时支持在线构建依赖层。上传依赖包的...

创建自定义层

通过 OSS 上传层:选择上传构建层的ZIP文件的 Bucket 名称 和 文件名称。在线构建依赖层:选择 构建环境 并上传构建层的依赖文件 package.json 或 requirements.txt。说明 目前仅Python和Node.js运行时支持在线构建依赖层。上传依赖包的...

使用aliyun-codec插件

aliyun-codec插件是阿里云自主开发的索引压缩插件,可以对Elasticsearch(ES)底层多种索引文件进行压缩,同时支持source_reuse_doc_values特性。适用于写入量大、索引存储成本高的场景,例如日志场景、时序分析场景等,可以大幅降低索引的...

赋值节点

赋值节点支持ODPS SQL、SHELL和Python三种赋值语言,将节点最后一条查询或输出结果自动赋值给节点自带的输出参数(outputs),便于赋值节点的下游节点引用。您可结合节点上下文配置,参考本文使用赋值节点。注意事项 部分节点可通过节点...

业务添加DDoS高防后通过HTTP和HTTPS协议上传大文件...

解决方案 您先确认上传的文件大小,根据文件的大小,选择对应的解决方法:上传的文件大于2GB 解决DDoS高防最大能上 传2GB文件限制的解决方法如下:您可以给您的业务添加打包压缩功能,将您的文件压缩至小于2GB,然后上传压缩后文件。...

SDK概述

弹性加速计算实例EAIS提供Python和Java的SDK来方便您通过API创建和管理资源。本文介绍弹性加速计算实例EAIS支持的SDK列表和获取地址。...Python语言的SDK使用示例,请参见 Python示例。Java语言的SDK使用示例,请参见 Java示例。

安装PyODPS

PyODPS是MaxCompute的Python版本的SDK,提供对MaxCompute对象的基本操作及DataFrame框架,帮助您在MaxCompute上使用Python进行数据分析,支持在DataWorks或本地环境上使用。本文为您介绍在本地环境上使用PyODPS时,如何安装PyODPS。前提...

0016-00000814

问题原因 您发起了SelectObject请求,并在请求体XML中指定了目标文件的压缩类型,例如GZIP,但是服务端解压失败。问题示例 以下请求中通过CompressionType参数指定了目标文件采用GZIP压缩,如果服务端在处理该请求的过程中对目标文件解压...

索引表配置

file_compress:声明各种文件压缩方式的参数和别名,可供正排,倒排,summary使用文件级别的压缩。enable_ttl:是否使用 TTL(time to live)功能,过期数据会被自动清理。默认为 false。ttl_field_name:指定表中字段作为ttl的字段,原始...

索引表配置

file_compress:声明各种文件压缩方式的参数和别名,可供正排,倒排,summary使用文件级别的压缩。enable_ttl:是否使用 TTL(time to live)功能,过期数据会被自动清理。默认为 false。ttl_field_name:指定表中字段作为ttl的字段,原始...

数据压缩

重要 已设置的压缩和解压缩关系会保存在服务端,需设备端SDK执行 取消压缩和解压缩 操作,才能让服务端取消对相应Topic的压缩和解压缩操作。如果服务端未取消压缩和解压缩操作,对应设备通过一个不支持数据压缩的SDK登录后,设备与服务端...

公共请求头

它支持一组可以在所有API请求中使用的公共请求头,其详细说明如下:Header名称 类型 是否必须 说明 Accept 字符串 否 客户端希望服务端返回的类型,目前支持application/json、application/x-protobuf两种。仅对GET请求有效,具体取值以...

Dataphin中Python脚本如何使用本地csv文件

概述 本文为您介绍Dataphin中Python脚本如何使用本地的文件。详细信息 1.在dataphin中先通过资源管理模块上传本地文件。2.点击上传文件的详细信息,复制引用路径。3.在Python脚本中声明该文件,即可引用。适用于 Dataphin

Python Demo

关于使用阿里云Python SDK请参见 使用Python SDK。关于Python SDK CommonRequest的使用方法请参见 使用CommonRequest进行调用。SDK安装 运行录音文件识别Python示例,只需安装阿里云Python SDK的核心库。阿里云Python SDK支持Python版本...

Python Demo

关于使用阿里云Python SDK,请参见 使用Python SDK。关于Python SDK CommonRequest的使用方法,请参见 使用CommonRequest进行调用。SDK安装 运行录音文件识别Python示例,只需安装阿里云Python SDK的核心库。阿里云Python SDK支持python...

主机控制台文件管理功能中不显示htdocs目录

问题原因 在Linux操作系统的云虚拟主机管理控制台上,使用文件管理功能执行压缩和解压缩操作时,看到的站点根目录/实质上指的就是/htdocs 目录,所以不会直接显示/htdocs 目录。解决方案 此问题无需进行任何操作,您需要了解Linux操作系统...

概述

使用Python语言开发产品时,您可使用物联网平台提供的Python SDK,简化开发过程,使设备快速接入物联网平台。本文简要介绍Python SDK的使用说明和功能介绍。使用说明 Python SDK分为Paho-SDK和Link SDK两个系列。Paho-MQTT Python 基于开源...

环境说明

本文介绍在 函数计算 中使用Python语言编写函数的运行环境信息。Python运行时 函数计算 目前支持的Python运行时环境如下。版本 标识符 操作系统 架构 Python 3.10 python3.10 Debian 10 x86_64 Python 3.9 python3.9 Debian 9 x86_64 ...

环境说明

本文介绍在 函数计算 中使用Python语言编写函数的运行环境信息。Python运行时 函数计算 目前支持的Python运行时环境如下。版本 标识符 操作系统 架构 Python 3.10(公测中)python3.10 Debian 10 x86_64 Python 3.9 python3.9 Debian 9 x86...

Artifact

对于 SQL 作业是 SQL 文本以及依赖的 udf/connector 等,对于 JAR 作业是使用到的全部的 JAR 包和依赖文件,对于 Python 作业是要使用到的 py 文件以及 zip 包。sqlArtifact SqlArtifact SQL 作业必填信息。jarArtifact JarArtifact JAR ...

管理数据树

Shapefiles格式文件需要将.shp、.dbf、.prj、.shx 格式的文件压缩为一个.zip 文件进行上传。GeoJSON格式文件支持以.json 或.geojson 后缀的文件进行上传。确认无误后,单击 下一步。在 文件存储目录 页签,自定义 数据表名称 并选择需要...

压缩文件失败

问题现象 在主机管理控制台压缩文件后,没有在指定的保存位置找到压缩文件。可能原因 主机的可用网页空间不足。待压缩文件正在被访问或使用。解决方案 登录 主机管理控制台。在左侧导航栏,单击 站点信息。在 站点信息 页面的 网站信息 ...

后续指引

当您完成了开通产品、创建项目等基本操作后,...压缩解压 您可以根据需要使用该功能对OSS中的文件进行在线压缩和解压缩,高效、便捷地进行云上文件管理。图片违规检测 图片违规检测用于检测图片是否违规,帮助您提高审核效率,降低安全风险。

使用Python SDK的SelectObject查询CSV和JSON文件

本文介绍如何使用Python SDK的SelectObject查询CSV和JSON文件。说明 本文示例由阿里云用户fralychen提供,仅供参考。上传CSV或JSON格式文件 您可以...有关使用Python SDK的SelectObject查询CSV和JSON文件的更多信息,请参见 Python查询文件。

文件处理概述

文件处理是由智能媒体管理IMM提供的对多种文件格式进行压缩、解压等操作的处理能力。您可以将原始文件上传到阿里云对象存储OSS,通过OSS的RESTful数据处理接口 x-oss-process 在任何时间、任何地点、任何互联网设备上对文件进行压缩、解压...

概述

本文介绍数据压缩功能的使用。前提条件 已获取设备认证信息。具体操作,请参见 获取设备认证信息。已获取C Link SDK。具体操作,请参见 获取C Link SDK。定制SDK时,在 SDK定制 页面的 高级能力 区域,选中 数据压缩。已准备开发环境。具体...

使用Python依赖

背景信息 本文通过以下场景为您介绍如何使用Python依赖:使用自定义的Python虚拟环境 使用第三方Python包 使用JAR包 使用数据文件 使用自定义的Python虚拟环境 说明 VVR 4.x仅支持3.7版本的Python虚拟环境,VVR 6.x及以上的版本无此限制,...

Python SDK概述

PyODPS是MaxCompute的Python SDK,能够方便地使用Python语言与MaxCompute进行交互和数据处理。通过该SDK,可以更高效地开发MaxCompute任务、进行数据分析和管理MaxCompute资源。本文为您介绍PyODPS的使用和常见方法。PyODPS介绍 PyODPS提供...

Python服务端SDK集成

安装SDK 将下载的python_sdk.zip压缩包解压至服务端任意目录,需要确保服务端具有压缩包的读取权限。注意事项 与阿里云验证码服务端SDK相关的类都在com.aliyuncs.IAcsClient包中。SDK调用接口的默认连接超时时间是3秒,读取超时时间是80秒...

PySpark

示例中使用Python 3执行文件,和社区版的Spark相同,通过 spark.kubernetes.pyspark.pythonVersion 配置使用的Python版本,默认为Python 2.7。单击 执行。如何上传自行开发的或者第三方开发的Module 当开发Python程序时,往往会用到自行...

Python服务端SDK集成

安装SDK 将下载的python_sdk.zip压缩包解压至服务端任意目录,需要确保具有读取权限。注意事项 与阿里云验证码服务端SDK相关的类都在com.aliyuncs.IAcsClient包中。SDK调用接口的默认连接超时时间是3秒,读取超时时间是80秒。您可以调用带...

Python服务端SDK集成

安装SDK 将下载的python_sdk.zip压缩包解压至服务端任意目录,需要确保具有读取权限。注意事项 与阿里云验证码服务端SDK相关的类都在com.aliyuncs.IAcsClient包中。SDK调用接口的默认连接超时时间是3秒,读取超时时间是80秒。您可以调用带...

有关Object命令

使用示范:python osscmd uploadfromdir/mytemp/folder oss:/mybucket python osscmd uploadfromdir/mytemp/folder oss:/mybucket-check_point_file=tmp/mytemp_record.txt python osscmd uploadfromdir C:\Documents and Settings\User\My...

页面优化

开启页面优化功能,DCDN 进行页面优化时,会改变文件的MD5值,导致优化后文件的MD5值和源站文件的MD5值不一致。如果源站开启了Gzip压缩或Brotli压缩,DCDN 的页面优化功能将会失效,DCDN 会将源站压缩后的文件透传给客户端。如果您同时开启...

基于gzip压缩格式的堆分析

简介 除了正常的二进制堆转储文件(Heap dump)之外,ATP也支持gzip压缩格式的堆转储文件。用户可以生成gzip压缩格式的堆转储文件,然后上传到ATP直接分析。使用gzip压缩格式使得堆转储文件更小,上传更快,但是另一方面会使得分析过程轻微...

主机间(同一账号)迁移网站

将网站备份文件夹(例如 htdocs)中的子文件重新压缩为.zip 文件(例如htdocs_example.zip)。使用FTP客户端将已备份好的原主机数据上传到目标云虚拟主机的网站根目录下。使用FileZilla工具连接目标云虚拟主机。具体操作,请参见 使用...
共有158条 < 1 2 3 4 ... 158 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
时间序列数据库 TSDB 智能视觉生产 云数据库 RDS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用