DBGateway常见问题
检查DBGateway所在服务器与数据库实例（MySQL、PostgreSQL、MongoDB和Redis等）间网络是否连通。请执行以下命令确认：telnet 数据库实例IP或域名 数据库实例服务端口号 例如：telnet 192.168.XX.XX 3306 如出现以下提示，表示网络连接正常...
ApsaraDB For OceanBase数据源
ApsaraDB for OceanBase数据源提供读取和写入...否 无 batchSize 一次性批量提交的记录数大小，该值可以极大减少数据同步系统与服务器端的网络交互次数，并提升整体吞吐量。说明 fetchSize 值过大（>2048）可能造成数据同步进程OOM。否 1,024
应用场景
1.2 收益 系统解耦 对外，大数据系统与业务系统解耦，对内，大数据系统各组件之间解耦。实时通道 通过数据总线，业务数据能够实时汇入大数据系统，缩短数据分析周期。2.实时数据清洗和分析 2.1 接入多种异构数据，实时清洗并归一化 通过...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
快速体验
大数据存储与计算：云原生大数据计算服务 MaxCompute（必选）、实时数仓Hologres（可选）、开源大数据平台E-MapReduce（可选），您可根据需要开通MaxCompute、Hologres或E-MapReduce。数据开发与调度：大数据开发治理平台 DataWorks数据...
目标数据库连接性检查
为保障数据迁移任务的顺利执行，在预检查阶段检查DTS服务器是否能够连通要迁移的目标数据库。本文将介绍目标数据库连接性检查...网络互通问题 经过上述排查后仍然无法通过目标数据库连接性检查，可能是DTS服务器与目标数据库网络互通问题。
源库连接性检查
网络互通问题 经过上述排查后仍然无法通过源库连接性检查，可能是DTS服务器与源数据库网络互通问题。您可以 通过钉钉（钉钉通讯客户端下载地址）进入到DTS客户交流钉钉群（群号：68325004196或68640008972），进行咨询。
应用身份识别
通过在您的数据库服务器或与数据库服务器相连的服务器中安装具备应用身份识别功能的插件，实现将URL、用户名和客户端IP以注释方式插入到对应的SQL语句中，数据库审计可以根据注释信息对用户信息和SQL语句进行关联分析。以下是使用应用身份...
连接方式概述
OceanBase Connector/C 也称为 LibOBClient，用于应用程序作为独立的服务器进程通过网络连接与数据库服务器 OBServer 节点进行通信。客户端程序在编译时会引用 C API 头文件，同时可以连接到 C API 库文件。说明 LibOBClient 生成的 so ...
通过命令行工具连接ClickHouse
如果已安装clickhouse-client的服务器与 云数据库ClickHouse 集群不在同一VPC内，请先为 云数据库ClickHouse 集群申请外网地址。具体操作，请参见 申请和释放外网地址。已将clickhouse-client所在服务器的IP地址添加到 云数据库ClickHouse ...
ClickHouse数据源
ClickHouse数据源为您提供读取和写入ClickHouse...否 无 batchSize 一次性批量提交的记录数大小，该值可以极大减少数据同步系统与ClickHouse的网络交互次数，并提升整体吞吐量。如果该值设置过大，会导致数据同步运行进程OOM异常。否 1,024
导入数据
如果clickhouse-client所在服务器与 云数据库ClickHouse 集群在同一VPC内，您可以使用VPC地址。否则，请使用外网地址。port TCP端口号，您可以在 集群信息 页面查看。user 您通过 云数据库ClickHouse 控制台创建的数据库账号。password ...
与Spark集成分析
基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos提供了不同级别的数据分析模型，最基础的是GeometryRDD模型，用来实现Ganos数据中SimpleFeature与Spark中RDD模型的之间的转换。在GeometryRDD基础上，DLA ...
与Spark集成分析
基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos提供了不同级别的数据分析模型，最基础的是GeometryRDD模型，用来实现Ganos数据中SimpleFeature与Spark中RDD模型的之间的转换。在GeometryRDD基础上，DLA ...
减灾与应急时空解决方案与案例
全球气象海洋环境数值预报数据以及历史灾情数据等，传统关系型数据库无法良好支持各种数据类型，传统GIS服务器也难以高效存储与管理。大量高分辨率栅格数据、矢栅一体化点线面查询及特征统计耗时较长，严重影响用户体验。传统GIS服务软件...
产品简介
DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos打通了阿里云各个存储系统，如...
轻量应用服务器数据迁移至ECS实例
迁移影响 影响项 说明 服务器内的授权应用 轻量应用服务器与ECS实例的专有网络VPC不互通，将轻量应用服务器迁移至ECS实例后，专有网络VPC会发生变化。由于ECS实例的底层硬件设备与轻量应用服务器不同，迁移后可能会导致某些与硬件绑定的...
源服务器迁移至轻量应用服务器
数据盘 数据盘<0>：表示迁移后阿里云轻量应用服务器数据盘的大小，单位为GiB。数据盘大小取值范围：20~32768。您可以设置 数据盘 前复选框的选中情况，自行选择是否迁移目标数据盘。轻量应用服务器最多只能挂载1块数据盘。数据盘取值需要...
源服务器迁移至轻量应用服务器
数据盘 数据盘<0>：表示迁移后阿里云轻量应用服务器数据盘的大小，单位为GiB。数据盘大小取值范围：20~32768。您可以设置 数据盘 前复选框的选中情况，自行选择是否迁移目标数据盘。轻量应用服务器最多只能挂载1块数据盘。数据盘取值需要...
大数据安全治理的难点
大数据体系的特点与安全治理难点 由于大数据系统在“存储、用户、入口、流转、交付”等多方面的特点，想要回答好上述问题，存在诸多难点。存储 众所周知，大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）...
第三方教程
一图帮你彻底区分 轻量应用服务器助力初创型建站服务企业降本提效 轻量应用服务器如何帮助大学生在大数据课程中高效学习 搭建网站 3步！完成WordPress博客迁移与重新部署 只需5步！在轻量应用服务器部署Hexo博客 使用轻量应用服务器搭建扫...
使用pg_dump和pg_restore将自建PostgreSQL数据库迁移...
说明 使用pg_dump和pg_restore迁移数据库时，虽然支持跨大版本迁移，但是可能面临不同大版本间的兼容问题，为确保迁移顺利，强烈建议自建PostgreSQL与RDS PostgreSQL实例的大版本相同。您可以在自建PostgreSQL数据库所在的服务器中，使用 ...
什么是备份数据量
数据文件空间 数据库所属数据文件在服务器上占用的磁盘空间。备份数据量 备份数据量指通过备份链路的实际数据大小。与数据文件空间不同，备份数据量取决于数据库类型、备份方式、备份粒度等因素。存储数据量 存储数据量指存放存储介质的...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
CREATE USER MAPPING
CREATE USER MAPPING定义一个用户到一个外部服务器的新...允许的选项名和值与该服务器的外部数据包装器有关。示例 为用户bob、服务器foo创建一个用户映射。CREATE USER MAPPING FOR bob SERVER foo OPTIONS(user 'bob',password 'secret');
CREATE USER MAPPING
CREATE USER MAPPING定义一个用户到一个外部服务器的新...允许的选项名和值与该服务器的外部数据包装器有关。示例 为用户bob、服务器foo创建一个用户映射。CREATE USER MAPPING FOR bob SERVER foo OPTIONS(user 'bob',password 'secret');
Azure Cosmos DB API for MongoDB迁移至阿里云
该服务器仅作为数据备份与恢复的临时中转平台，迁移操作完成后不再需要。备份目录所在分区的可用磁盘空间要大于Azure Cosmos DB。本案例将MongoDB服务安装在Linux服务器上进行演示。迁移步骤 登录Azure门户。在左侧导航栏单击 Azure Cosmos...
升级数据库大版本
升级数据库大版本所用时间与数据库的数据量有关，请根据业务情况提前安排升级时间。升级数据库大版本后不支持降级数据库大版本。升级数据库大版本后，低版本的备份数据不能恢复至云数据库MongoDB实例。您可以下载备份文件，将低版本的备份...
最佳实践概览
场景 说明 通过OSS内网地址访问OSS资源实现内网互通 同地域下轻量应用服务器与对象存储OSS（Object Storage Service）默认内网互通，当轻量应用服务器通过OSS内网地址访问OSS资源时，不收取流量费用。本文介绍同地域轻量应用服务器如何通过...
ModifyReplicationJobAttribute-修改迁移任务
复制驱动器是指，复制源服务器数据到中转实例时所使用的工具。不同复制驱动器支持参数可能不同。复制驱动器 SMT 目前支持以下参数：bandwidth_limit：传输速度带宽限制。compress_level：传输压缩率。checksum：是否开启 checksum 校验。...
数据集成概述
背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量数据表的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优（例如容错，限速，并发）等。...
计费概述
重要 数据盘到期日与所挂载的轻量应用服务器实例一致，且与轻量应用服务器实例为绑定状态，无法卸载。超额流量：套餐中包含了固定的流量配额，但是如果流量配额使用完，则阿里云将按照实际的流量使用情况，对超额流量按按量计费收取费用。...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
服务器中毒导致监控数据不一致
问题描述 在服务器上执行top命令查看CPU使用率，与主机监控中的CPU使用率相差较大。问题原因 由于服务器中毒，top命令被替换，导致查看的数据被修改。解决方案 正常服务器上执行top命令，系统显示如下。建议通过安骑士查看，如有异常会检测...
离线集成支持的数据源
离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hologres 支持 支持 Impala 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 GreenPlum 支持 支持 文件数据源 FTP 支持 支持 OSS 支持 ...
数据传输与迁移概述
MaxCompute提供多种渠道，以便您从业务系统或外部数据源写入数据到MaxCompute，或者从MaxCompute写出数据到外部系统或外部数据源。数据传输渠道 SDK-Tunnel渠道 外表（湖仓一体）JDBC渠道 场景数据写入MaxCompute 离线数据批量写入（数据...
快速搭建LNMP环境（通过宝塔面板）
宝塔面板是一款使用方便、功能强大且终身免费的服务器管理软件，支持Linux与Windows系统。一键配置LAMP、LNMP、网站、数据库、FTP、SSL，通过Web端轻松管理服务器。本文主要介绍了如何使用应用镜像BT-Panel在轻量应用服务器上搭建宝塔面板...
数据库
数据库基本信息 pg_stat_database pg_stat_database 视图将显示集群中每一个数据库中的每一行数据库范围的统计信息。相关参数信息如下表所示：参数 类型 描述 datid oid 数据库OID。datname name 数据库名称。numbackends integer 当前连接...
数据库
数据库基本信息 pg_stat_database pg_stat_database 视图将显示集群中每一个数据库中的每一行数据库范围的统计信息。相关参数信息如下表所示：参数 类型 描述 datid oid 数据库OID。datname name 数据库名称。numbackends integer 当前连接...
冷热分层
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...
- 产品推荐
- 这些文档可能帮助您