开发后端逻辑流操作代码
此工程是一个多模块的项目，其中已经生成了 custom-action-core 模块，工程结构如下：libs目录：存放了core模块所依赖的jar包，默认有三个jar包。custom-action-api-1.0.0-SNAPSHOT-sources.jar：此jar包为 custom-action-api 模块的源码，...
配置扩展文件
阿里云PolarDB O引擎提供了兼容Java 6、Java 7和Java 8三个Java版本的JDBC驱动，分别对应以下三个JAR包：polardb-jdbc16.jar polardb-jdbc17.jar polardb-jdbc18.jar 您可以根据应用使用的JDK版本选择合适的JDBC。PostgreSQL JDBC driver ...
Java SDK 快速开始
(3)编译打包 运行命令编译打包：mvn package 即可在 target 得到下面 3 个 jar 包：batchcompute-job-log-count-1.0-SNAPSHOT-Split.jar batchcompute-job-log-count-1.0-SNAPSHOT-Count.jar batchcompute-job-log-count-1.0-SNAPSHOT-...
A100使用指南
IP 2有3个数据库端口对外提供服务，则占用3个数据库实例，合计需要占用4个数据库实例。选择数据库审计规格时需要大于、等于4个数据库实例，即选用高级版（支持审计5个数据库实例）。快速入门 购买数据库审计A100实例后，您需要登录数据库...
资源
运行此UDF时，MaxCompute会自动下载这个JAR包，获取您的代码来运行UDF，无需您干预。上传JAR包的过程就是在MaxCompute上创建资源的过程，这个JAR包是MaxCompute资源的一种。MapReduce：您编写MapReduce程序后，将编译好的JAR包作为一种资源...
数据库对象的逻辑结构
AnalyticDB PostgreSQL 数据库由许多数据库对象组成，包括表（table）、索引（index）、序列（sequence）、视图（view）、以及数据库（database），数据库对象在逻辑上是彼此分离，相互之间可以有包含关系。一个 AnalyticDB PostgreSQL ...
逻辑表表达式
数据库下枚举 db_01.test_[1,2,4,6,7],db_02.test_[2,3,5,7,9],db_03.test_[1,4,6,7,9]：在3个数据库下各创建5张表。数据库下不均等表 db_01.test_[1-7],db_02.test_[10-15]：在数据库db_01下创建7张表，在数据库db_02下创建6张表。
Notebook
jar包必须放在OSS上，多个jar包之间通过逗号分隔。通过设置spark.jars.packages 来设置依赖的package，格式：groupId:artifactId:version,多个package逗号分隔。Python package 需要通过Databricks数据洞察控制页面选择相应的python包。Q：...
Datastream JAR迁移
附加依赖文件 上传已下载的 mysql-connector-java-8.0.27.jar 和 flink-connector-jdbc_2.11-1.13.0.jar 两个JAR包。在 高级配置 页签，配置JM和TM的资源量。单击 保存。在页面右上角，单击 上线，将作业提交至集群。在 作业运维 页面，...
Table/SQL JAR迁移至JAR
附加依赖文件 上传已下载的 mysql-connector-java-8.0.27.jar 和 flink-connector-jdbc_2.11-1.13.0.jar 两个JAR包。在 高级配置 页签，配置JM和TM的资源量。单击 保存。在页面右上角，单击 上线，将作业提交至集群。在 作业运维 页面，...
Java线程栈分析-CPU利用率持续升高
再结合业务同学的反馈，大概有500多个jar包，所以根据线程栈分析得出的初步猜测是：在反序列化过程中遇到未加载的类，然后触发URLClassLoader从500多个jar包中遍历查找类，这个查找过程导致了CPU利用率持续升高。根据上述的栈名称，我们从...
常见问题
项目（Project）是MaxCompute的基本组织单元，类似于传统数据库的Database或Schema的概念，是进行多用户隔离和访问控制的主要边界。项目中包含多个对象，例如表（Table）、资源（Resource）、函数（Function）和实例（Instance）等。一个...
测试方法
在后续测试过程中，DLA Spark需要使用这个Jar包来生成Terasort测试数据以及进行Terasort基准测试，因此需要把该Jar包上传到您的OSS上。操作步骤 场景一：1 TB测试数据下DLA Spark+OSS与自建Hadoop+Spark集群性能对比 准备测试数据 在OSS上...
Table/SQL JAR迁移至SQL
在 高级配置 页签的 附加依赖文件 选项中，上传已下载的 mysql-connector-java-8.0.27.jar 和 flink-connector-jdbc_2.11-1.13.0.jar 两个JAR包。在 资源配置 页签，配置作业的并发度。本示例参考自建Flink集群作业运行命令，设置作业并发...
Spark Streaming作业配置
executor-memory 5G-executor-cores 1-num-executors 32-class com.aliyun.emr.checklist.benchmark.SlsStreaming emr-checklist_2.10-0.1.0.jar<project><logstore><accessKey>注意 如果作业JAR包保存在OSS中，则引用这个JAR包的方式是 ...
使用Python依赖
假如需要依赖多个JAR包，且名字分别为 jar1.jar 和 jar2.jar，配置内容如下。pipeline.classpaths:'file:/flink/usrlib/jar1.jar;file:/flink/usrlib/jar2.jar' 单击 保存。使用数据文件 说明 Flink暂不支持通过上传数据文件的方式来进行...
Spark
标准的Spark通常使用以下3种配置：spark.jars spark.jars 可以用来指定JAR文件，多个JAR包可以用逗号（,）隔开。您可以把JAR包放在OSS上，也可以放在目标EMR集群的HDFS上。建议您放在OSS上，以便于您的JAR包可以被多个EMR集群共享，即使...
Spark作业配置
emr/checklist/data/wc-counts 32 注意 JAR包保存在OSS中，引用这个JAR包的方式是 ossref:/emr/checklist/jars/emr-checklist_2.10-0.1.0.jar。您可以单击下方的+插入OSS路径，文件前缀 选择 OSSREF，从 文件路径 中进行浏览和选择，系统...
UDF开发（Java）
例如UDF1、UDF2分别对应资源JAR包udf1.jar、udf2.jar，两个JAR包里都包含名称为 com.aliyun.UserFunction.class 的类但实现逻辑不一样，当同一条SQL语句中同时调用UDF1和UDF2时，MaxCompute会随机加载其中一个类，此时会导致UDF执行结果不...
Java服务端SDK集成
例如，在Eclipse中，右键单击 工程，选择 Properties>Java Build Path>Libraries>Add External JARs，选择并添加这两个jar包。添加成功后，您就可以在您的服务端工程中使用阿里云验证码的Java SDK。若为Maven的方式导入，请在pom.xml文件中...
存储资源包概述
例如购买了1000 GB的存储包，有三个数据库实例，存储容量分别是300 GB、400 GB和500 GB，那么300+400+500-1000=200 GB，存储包抵扣后，超出的200 GB需要以按量付费的方式收取费用。您可通过如下方式查看存储包抵扣量：方式一：登录 云数据...
Java服务端SDK集成
例如，在Eclipse中，右键单击 工程，选择 Properties>Java Build Path>Libraries>Add External JARs，选择并添加这两个jar包。添加成功后，您就可以在您的服务端工程中使用阿里云验证码的Java SDK。若为Maven的方式导入，请在pom.xml文件中...
Java:Spymemcache
添加这个 jar 包之后，代码就能编译通过了。OcsSample1.java 代码示例（需要用户名和密码）import java.io.IOException;import java.util.concurrent.ExecutionException;import net . spy . memcached . AddrUtil ;import ...
CREATE PACKAGE
示例 包规格 empinfo 包含三个公共组件：公共变量、公共存储过程和公共函数。CREATE OR REPLACE PACKAGE empinfo IS emp_name VARCHAR2(10);PROCEDURE get_name(p_empno NUMBER);FUNCTION display_counter RETURN INTEGER;END;
Java UDTF
例如UDTF1、UDTF2分别对应资源JAR包udtf1.jar、udtf2.jar，两个JAR包里都包含名称为 com.aliyun.UserFunction.class 的类但实现逻辑不一样，当同一条SQL语句中同时调用UDTF1和UDTF2时，MaxCompute会随机加载其中一个类，此时会导致UDTF执行...
Java UDAF
例如UDAF1、UDAF2分别对应资源JAR包udaf1.jar、udaf2.jar，两个JAR包里都包含名称为 com.aliyun.UserFunction.class 的类但实现逻辑不一样，当同一条SQL语句中同时调用UDAF1和UDAF2时，MaxCompute会随机加载其中一个类，此时会导致UDAF执行...
存储资源包
例如购买了1 TB的存储包，有三个数据库实例，存储容量分别是300 GB、400 GB和500 GB，那么300+400+500-1000=200 GB，存储包抵扣后，超出的200 GB需要以按量付费的方式收取费用。您可以在 费用中心 管理控制台查看存储资源包的每小时抵扣...
DBLE与PolarDB多主集群（库表）结合使用最佳实践
测试期间，将3个数据库依次切换至空闲的RW节点，最终每个RW节点上均有且仅有一个数据库。查看集群整体的性能变化趋势。如果业务的写入以自动提交（autoCommit=1）为主，PolarDB多主集群（库表）结合DBLE可以实现接近线性的性能提升。QPS与...
Spark SQL开发介绍
AnalyticDB MySQL版 Spark支持在控制台直接提交Spark SQL，无需编写JAR包或者Python代码，便于数据开发人员使用Spark进行数据分析。本文介绍 AnalyticDB MySQL版 Spark ...例如查询语句SELECT、插入语句INSERT、查看数据库SHOW DATABASE等。
ALTER DATABASE
ALTER DATABASE 更改一个数据库的属性。简介 ALTER DATABASE 更改一个数据库的属性。第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户...
远程文件系统
查看是否有master.jar、worker.jar、tracker.jar 三个进程存在，如果有则执行kill-9 进程号，将3个进程都停止。到指定目录下，输入 cd/mnt/cube/software/ossimport。二、配置 job.cfg 文件 输入 cd/mnt/cube/software/ossimport/conf，...
远程文件系统
查看是否有master.jar、worker.jar、tracker.jar 三个进程存在，如果有则执行kill-9 进程号，将3个进程都停止。到指定目录下，输入 cd/mnt/cube1/software/ossimport。二、配置 job.cfg 文件 输入 cd/mnt/cube1/software/ossimport/conf，...
开发限制
Partition 16 Table 64 Column Partition Key View Variables Constraint 资源使用限制 资源 类型 数量 逻辑资源 Database 最多包含32个数据库。Table 每个数据库最多包含8192张表。Partition 每张表最多包含8192个分区。Column 每张表最多...
pg_database
和大部分系统目录不同，pg_database 是在集簇的所有数据库之间共享的：在一个集簇中只有一份 pg_database 拷贝，而不是每个数据库一份。列名称 列类型 描述 oid oid 行标识符。datname name 数据库名称。datdba oid 数据库的拥有者，通常是...
云数据库MongoDB版（分片集群架构）同步至云数据库...
示例：本案例的自建MongoDB数据库有三个Shard节点，所以需要分别为这三个节点清除孤立文档。mongo-host 172.16.1.10-port 27018-authenticationDatabase admin-u dtstest-p 'Test123456' cleanupOrphaned.js mongo-host 172.16.1.11-port ...
使用限制
database数量 一个实例最多创建16个数据库（包含default数据库）。table名称 由大写字母、小写字母、数字、下划线其中的一种或多种组成，最大长度为128个字符。table数量 一个数据库最多创建10000个数据表。tag列名称 可见字符，最大长度为...
HDFS
查看是否有master.jar、worker.jar、tracker.jar 三个进程存在，如果有则执行kill-9 进程号，将3个进程都停止。到指定目录下，输入 cd/mnt/cube/software/ossimport。二、配置hdfs-oss.cfg文件 说明 任务需要指定到目录层级。如果需要迁移...
HDFS
查看是否有master.jar、worker.jar、tracker.jar 三个进程存在，如果有则执行kill-9 进程号，将3个进程都停止。到指定目录下，输入 cd/mnt/cube1/software/ossimport。二、配置hdfs-oss.cfg文件 说明 任务需要指定到目录层级。如果需要迁移...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库，并可以指定数据库的默认属性（如数据库默认字符集，校验规则等）。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...
创建数据库
参数 说明 数据库（DB）名称 最长63个字符。由小写字母、数字、中划线、下划线组成。以字母开头，以字母或数字结尾。支持字符集 数据库的字符集。Collate 字符串排序规则。Ctype 字符分类。授权账号 设置数据库的所有者，对数据库拥有ALL...
- 产品推荐
- 这些文档可能帮助您