Dataphin自定义组件创建Hive自定义数据源，集成任务...
问题描述 本文主要描述了Dataphin自定义组件创建Hive自定义数据源，集成任务执行的时候报错连接数据库失败的解决方法。问题原因 数据源的链接地址格式不正确。解决方案 正确格式如下：jdbc:hive2:/{ip}:{port}/{db} 适用于 Dataphin v2.9.4...
Go-SQL-Driver/MySQL 连接 OceanBase 数据库示例程序
test.go 代码介绍 test.go 文件定义了如何使用 Go 语言和 OceanBase 数据库的 MySQL 模式进行交互，包括连接数据库、创建表、插入数据、查询数据和删除表等操作。test.go 文件包含以下内容：定义 main 包。package main 表示这是一个可执行...
通过JDBC方式连接Trino
jdbc:trino:/<主节点名称>:9090/hive#连接数据库，使用名为hive的Catalog和默认的Schema。jdbc:trino:/<主节点名称>:9090/hive/default#连接数据库，使用名为hive的Catalog和名为default的Schema。说明 本文示例中的<主节点名称>，请根据您...
通过JDBC方式访问Presto
jdbc:presto:/master-1-1:8889/hive#连接数据库，使用Catalog（hive）和Schema。jdbc:presto:/master-1-1:8889/hive/default#连接数据库，使用Catalog（hive）和Schema（default）。连接参数 JDBC Driver支持多种配置参数，这些参数可以...
添加RDS PostgreSQL数据库
外网连接数据库 登录 DataV-Atlas控制台。在 数据中心 页面下方，单击 新建数据连接。选择需要添加的数据库，单击 去连接数据库。不打开VPC开关，填写数据库信息。参数 说明 数据连接名称 数据源的显示名称，可以自由命名。域名 连接数据库...
多租户管理使用说明
通过租户下的用户连接数据库 通过客户端来连接数据库时，需要将用户指定为 用户名称@租户名称 的形式。示例如下：mysql-host=xxxxxx-u user1@tenant_1-p pwssword 连接成功后，该用户将受到对应租户下的资源限制。查看租户绑定关系 使用高...
使用Hive查询JindoFS上的数据
例如，创建名为database_on_jindofs，location为 jfs:/emr-jfs/warehouse/database_on_jindofs 的Hive数据库。CREATE DATABASE database_on_jindofs LOCATION 'jfs:/emr-jfs/hive/warehouse/database_on_jindofs';修改Database的Location到...
通过 Go 客户端连接 OceanBase 数据库
为您介绍使用 Go 客户端通过代理模式连接数据库的操作。前提条件 在使用 GO 客户端时，尽量使用最新版本的客户端，最新版本客户端请详见 GitHub go 客户端仓库。引入 obkv-table-client-go 依赖，在本地 GO 仓库上执行以下命令，获取最新 ...
使用Mongo Shell通过SSL加密连接数据库
在使用Mongo Shell连接数据库时，您可以启用SSL（Secure Sockets Layer）加密功能提高数据链路的安全性。通过SSL加密功能可以在传输层对网络连接进行加密，在提升通信数据安全性的同时，保障数据的完整性。前提条件 实例类型为副本集实例，...
通过代理连接地址连接数据库
连接RDS MySQL实例 在获取数据库代理连接地址和端口后，支持使用数据库代理连接地址通过以下三种方式连接RDS MySQL实例：通过客户端、命令行连接RDS MySQL实例 通过DMS登录RDS数据库 通过应用程序访问数据库 相关文档 连接数据库 配置数据...
Hive
Hive数据仓库工具能将存储在HDFS系统中的结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成Map/Reduce任务来执行。操作步骤 初始化Spark。val spark:SparkSession=SparkSession.builder().config("hive.metastore...
Hive连接器
该元数据存储在数据库（例如，MySQL）中，并通过Hive Metastore Service（HMS）访问。一种称为HiveQL的查询语言。该查询语言在分布式计算框架（例如，MapReduce或Tez）上执行。前提条件 已创建EMR-3.45.0及后续版本和EMR-5.11.0及后续版本...
通过代理连接地址连接数据库
在读写分离、高并发读等业务场景中，建议在业务应用中将数据库连接地址配置为数据库代理连接地址，RDS PostgreSQL可以根据代理连接地址配置的读写属性和读权重进行自动分配，减少主实例负载。本文介绍如何通过数据库代理连接地址连接RDS ...
分片集群实例连接说明
ConnectionstringURI SRV高可用连接地址 重要 推荐生产环境的应用程序通过ConnectionStringURI连接数据库，客户端自动将请求发送到Mongos组件的多个节点上，实现负载均衡。Mongos组件的某个节点出现故障时，客户端能自动进行故障切换，将...
什么是数据库代理
您可以连接数据库代理访问地址使用数据库代理的各项功能，以简化RDS PostgreSQL数据库实例的连接管理，请参见 通过代理连接地址连接数据库。适用场景 事务内有大量请求，导致主实例负载过高的场景。连接数过多导致主实例负载过高的场景。有...
CREATE[PUBLIC]DATABASE LINK
数据库连接是一个对象，允许在DELETE、INSERT、SELECT或UPDATE命令中引用远程数据库中的表或视图。通过将附加到SQL命令中引用表或视图名称来引用数据库连接，其中 dblink 是数据库连接的名称。数据库连接可以是公共的或私有的。公共数据库...
接入数据库
数据库连接方式说明 连接类型 说明 支持的数据资产类型 一键连接 指通过控制台按钮一键连接数据库的方式。在连接过程中，数据安全中心 会针对目标数据资产添加只读账号，数据安全中心 通过该账号连接目标数据库，从而进行数据识别任务；...
自建Hive数据仓库迁移到阿里云E-MapReduce
可靠性 使用阿里云数据库RDS保存Hive的元数据信息，可以提升数据可靠性和服务可用性，免除客户运维自建MySQL数据库的工作。架构图 方案详情 请参见 阿里云自建Hive数据仓库跨版本迁移到阿里云EMR。icmsDocProps={'productMethod':'created'...
SSL连接RDS PostgreSQL数据库
本文介绍配置了SSL链路加密后，如何通过pgAdmin、psql命令行终端以及JDBC连接数据库。前提条件 已开启SSL链路加密。如果未开启，请参见 快速配置SSL加密 或 配置自定义证书。已获取如下文件。（可选）客户端证书（client.crt）、客户端证书...
Quick BI连接Hive数据源，用户名密码没有修改，过一段...
问题原因 经过确认，通过Kerberos认证连接的Hive数据源，但是没有将容器内的kerberos目录挂载到宿主机内，保留配置文件导致。解决方案 需要联系运维同学执行挂载kerberos目录的操作，不然每次容器重启后，hive数据源的账号密码就会需要重新...
通过Mongo Shell连接MongoDB分片集群实例
重要 不建议在生产环境中直接使用root账号连接数据库。您可以根据业务需求创建用户并分配权限，详情请参见 MongoDB数据库账号权限管理。鉴权数据库名称，用于指定数据库账号所属的数据库。当数据库账号为root时...
强制客户端开启SSL连接
方法一：配置ACL客户端访问控制 在配置客户端CA证书后，您可以在RDS PostgreSQL实例中配置ACL控制客户端的访问，此时客户端必须携带客户端证书和私钥并通过客户端对应认证方式的验证才能连接数据库。说明 配置ACL期间，PostgreSQL数据库...
DLF统一元数据
切换为MySQL（包括集群内置MySQL、统一meta数据库和自建RDS）：设置 hive.imetastoreclient.factory.class 的值为 org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClientFactory。切换为DLF统一元数据：设置 hive....
管理连接地址
您可以通过 PolarDB 集群的集群地址和主地址来连接数据库集群。本文将主要介绍如何申请集群地址和主地址。查看连接地址和端口 登录 PolarDB控制台。在左上角，选择集群所在地域。找到目标集群，单击集群ID。在 基本信息 页面的 数据库连接 ...
连接数据库集群
连接数据库集群 使用DMS连接集群 DMS是阿里云提供的图形化的数据管理工具，它是一种集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持对关系型数据库（MySQL、SQL Server、...
Hive采集字段
简介 Hive采集工具通过访问Metastore DB 进行相关资源信息采集，当前支持的类型为MySQL数据库。基本信息 通过对Hive的对象信息进行盘点，采集的字段重点举例为：Hive版本 Hive db名称 Hive db大小 表个数 分区表个数 外部表个数 事物表个数...
Quick BI连接hive数据源报错："Required field&39;...
问题描述 Quick BI连接hive数据源报错："Required field&39;client_protocol&39;is unset!Struct:TOpenSessionReq(client_protocol:null,configuration:{use:database=group3_dm}。问题原因 hive版本属于cdh hive，quick bi支持的是apache ...
副本集实例连接说明
说明 不建议在生产环境中直接使用root账号连接数据库。您可以创建用户并分配权限，详情请参见 使用DMS管理MongoDB实例的账号。数据库账号对应密码。如果没有设置或忘记密码，您可以设置或修改密码，具体方法请参见（可选）重置密码。要访问...
如何查询及限制连接数
通过Connection String URI连接数据库时，在URI末尾加上&maxPoolSize=即可设置连接池的连接数。Mongo Shell连接示例（设置连接数为10），数据库账号为test，所属数据库为admin：mongo"mongodb:/test:*@dds-bp19f409d7512*-pub.mongodb.rds....
Hive连接器
该元数据存储在数据库（例如，MySQL）中，并通过Hive Metastore Service（HMS）访问。一种称为HiveQL的查询语言。该查询语言在分布式计算框架（例如，MapReduce或Tez）上执行。本文为您介绍Hive连接器相关的内容和操作，具体如下：修改Hive...
配置连接器
连接器 功能 对应文档 hive 使用Hive连接器可以查询存储在Hive数据仓库中的数据。Hive连接器 kudu 使用Kudu连接器可以查询、插入和删除存储在Kudu里的数据。Kudu连接器 iceberg 使用Iceberg连接器可以查询Iceberg格式的数据文件。Iceberg...
什么是数据库代理
您可以连接数据库代理访问地址使用数据库代理的各项功能，以简化RDS MySQL数据库实例的连接管理。RDS MySQL数据库代理具有高可用、高性能、可运维、简单易用等特点。适用场景 事务内有大量请求，导致主实例负载过高的场景。连接数过多导致...
使用MongoDB工具将自建数据库迁移至单节点实例
Mongodump和Mongorestore是MongoDB数据库自带的备份恢复工具。...更多信息 数据库迁移至阿里云MongoDB实例后，您可以执行连接数据库、管理数据库和数据库账号等操作。通过Mongo Shell连接MongoDB单节点实例 MongoDB数据库账号权限管理
通过 ODC 连接 OceanBase 数据库
OceanBase 数据库支持通过 OceanBase 开发者中心（OceanBase Developer Center，ODC）进行管理维护，本文介绍如何在 ODC 上添加新的数据库连接并登录使用。前提条件 登录云 OceanBase 数据库，并拥有可登录的账号和数据库信息。操作步骤 ...
通过 ODC 连接 OceanBase 数据库
OceanBase 数据库支持通过 OceanBase 开发者中心（OceanBase Developer Center，ODC）进行管理维护，本文介绍如何在 ODC 上添加新的数据库连接并登录使用。前提条件 登录云 OceanBase 数据库，并拥有可登录的账号和数据库信息。操作步骤 ...
通过 MySQL 客户端连接 OceanBase 租户
前提条件 通过 MySQL 客户端连接数据库前，需要确认以下信息：确保本地已正确安装 MySQL 客户端。OceanBase 数据库当前版本支持的 MySQL 客户端版本包括 V5.5、V5.6 和 V5.7。确保环境变量 PATH 中包含了 MySQL 客户端命令所在目录。操作...
RDS连接失败的排查方法
在连接数据库的代码或工具中，检查连接数据库的信息是否正确（确认内网和外网地址），详情请参见 如何连接RDS数据库。步骤二：检查白名单设置正确 确保已将正确的本地设备IP地址添加到RDS的IP白名单。请在数据库的白名单中临时添加 0.0.0.0...
自建数据源IBM DB2 LUW
数据库 连接数据库名称。Schema 需要连接的Schema名称。默认为DB2INST1。用户名 数据库对应的用户名。密码 数据库对应的密码。VPC数据源 根据业务场景，选择业务数据源是否为VPC自建数据源。如果您选中 VPC数据源，则需要配置如下参数：...
排查因连接数耗尽导致的数据库连接问题
已正确设置了白名单，通过Mongo Shell连接数据库时，提示如下错误：2019-07-10T10:30:43.597+0800 E QUERY[js]Error:network error while attempting to run command 'isMaster' on host 'dds-bpxxxxxxxx.mongodb.rds.aliyuncs....
DMS
使用DMS连接 云原生数据仓库AnalyticDB PostgreSQL版 数据库可以使得开发人员更专注于应用程序开发和业务需求，而无需过多关注底层数据库的管理和维护。功能简介 数据管理（Data Management Service，简称DMS）支持MySQL、SQL Server、...
- 产品推荐
- 这些文档可能帮助您