数据科学计算概述
Scikit-Learn：用于数据分析和数据挖掘任务的算法。为满足用户基于MaxCompute进行大规模数据处理、分析、挖掘及模型训练的需求，MaxCompute提供了一套Python开发生态，让用户通过统一的Python编程接口一站式、高效地完成数据处理、加工及...
安全性
网络和数据链路 AnalyticDB PostgreSQL版 做为云原生分布式系统拥有非常高的安全性，首先每个新建实例使用专有网络，也称为VPC（Virtual Private Cloud），VPC是一种隔离的网络环境，安全性和性能均高于传统的经典网络。根据使用场景可选择...
MapReduce
海量数据挖掘：非结构化数据、时空数据和图像数据挖掘。机器学习：监督学习、无监督学习和分类算法（例如决策树、SVM）。自然语言处理：基于大数据的训练和预测。基于语料库构建单词同现矩阵，频繁项集数据挖掘、重复文档检测等。广告推荐...
时空服务介绍
背景信息 越来越多的领域（例如出行、车联网、物联网、自动驾驶、物流、GIS等）都会产生海量的时空轨迹数据，用户对这些时空轨迹数据产生了时空范围查询、地理围栏判断和时空数据挖掘等需求。例如，查找过去一段时间经过某片区域的车辆、...
产品更新动态
订阅卡片 订阅作品 2023年2月 发布时间 2023-02-14 功能名称 功能描述 相关文档 分析板块升级——实现“主题分析”用户上传数据之后，将自动识别字段主题，并围绕“主题”展开数据特征挖掘和卡片推荐。相比面向全部数据的卡片推荐能够更...
自定义RDBMS数据库及同步数据
步骤四：创建离线管道任务 基于自定义的数据源组件类型（test_rdbms_mysql）和数据源实例（test_rdbms_mysql），创建离线管道任务。完成离线管道任务的创建后，即可运行离线管道任务，以实现数据的集成（同步数据）。步骤一：配置网络和...
自定义RDBMS数据库及同步数据
步骤四：创建离线管道任务 基于自定义的数据源组件类型（test_rdbms_mysql）和数据源实例（test_rdbms_mysql），创建离线管道任务。完成离线管道任务的创建后，即可运行离线管道任务，以实现数据的集成（同步数据）。步骤一：配置网络和...
应用场景
数据传输服务DTS（Data Transmission Service）支持数据迁移、数据订阅和数据实时同步功能，帮助您实现多种典型应用场景。不停机迁移数据库 传输方式：数据迁移 为了保证数据的一致性，传统的迁移过程需要您在迁移数据时停止向源数据库写入...
网络连通解决方案
使用高速通道或VPN连通ECS的VPC和数据源的网络。添加Dataphin的IP地址（VPC网络下Dataphin的出网IP地址）至ECS的安全组中。如何添加安全组，请参见 添加安全组规则。在ECS上配置Nginx反向代理。添加数据源访问地址至Dataphin项目空间的沙箱...
通用参考：添加路由
本文为您介绍如何添加路由规则，以便独享资源组可访问其他VPC网络和IDC网络。前提条件 请确保您的专有网络VPC已经绑定独享资源组，详情请参见 新增和使用独享调度资源组 和 新增和使用独享数据集成资源组。背景信息 您可以通过为独享资源组...
连接本地IDC
当您需要将本地数据中心的资源扩展到云上专有网络VPC时，您可以通过阿里云的VPN网关、高速通道物理专线或智能接入网关等多款网络产品，帮助您构建一个安全可靠的混合云环境。概述 您可以在本地数据中心和阿里云专有网络间建立私网通信，...
IDMapping在离线一体化解决方案
（四）技术实现细节 整个技术方案分为三部分：第一部分是数据梳理和图算法运行，根据数据挖掘相关子图信息，进行离线聚合。目前GraphCompute提供多种经典的图算法功能。社区发现 louvain：可以指定seed高置信度的设备权重，减少它们被合并...
区域下钻热力层（v2.x版本）
单击 子组件管理 下方的 区域下钻热力层，进入配置面板配置 区域下钻热力层 的样式和数据。说明 如果 子组件管理 中没有 区域下钻热力层，说明您还未添加 区域下钻热力层 子组件，请参见 地图容器（v2.x版本）进行添加。配置 搜索配置：...
区域热力层（v3.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
新建 TiDB 数据源
重要 您在 TiDB 数据库中配置的待订阅库表，需要和数据传输的数据迁移项目中配置的库表名保持一致。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建...
新建 ADB 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建云原生数据仓库 AnalyticDB MySQL 版...单击 测试连接，验证数据传输和数据源的网络连接，以及用户名和密码的有效性。待数据源测试连接成功，单击 确定。
Kafka实时ETL同步至Hologres
准备独享数据集成资源组并与数据源网络连通 在进行数据同步前，需要完成您的独享数据集成资源组和数据源的网络连通，详情请参见 配置网络连通。说明 Kafka与Hologres支持的网络类型如下：Kafka:指定VPC网络、公网。Hologres:指定VPC网络、...
新建 PostgreSQL 数据源
新建数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 PostgreSQL 数据源。前提条件 已创建 RDS ...单击 测试连接，验证数据传输和数据源的网络连接，以及用户名和密码的有效性。测试连接通过后，单击 确定。
EMR Hive数据整库离线同步至MaxCompute
准备独享数据集成资源组并与EMR Hive网络连通 在进行数据同步前，需要完成您的独享数据集成资源组和数据源的网络连通，详情请参见 配置网络连通。如果您的独享数据集成资源组和EMR数据源属于同一地域，可使用同地域VPC内网连通独享资源组和...
EMR Hive数据整库离线同步至MaxCompute
准备独享数据集成资源组并与EMR Hive网络连通 在进行数据同步前，需要完成您的独享数据集成资源组和数据源的网络连通，详情请参见 配置网络连通。如果您的独享数据集成资源组和EMR数据源属于同一地域，可使用同地域VPC内网连通独享资源组和...
新建 Kafka 数据源
背景信息 数据传输的安全问题，贯穿服务连通性验证、链路创建和数据传输过程。基于 Kafka 服务提供的安全体系，数据传输在数据加密和用户认证上均有一定的支持，以满足绝大部分安全需求。数据传输支持的 Kafka 认证方式包括：GSSAPI GSSAPI...
ClickHouse整库数据离线同步至Hologres
准备独享数据集成资源组并与数据源网络连通 在进行数据同步前，需要完成您的独享数据集成资源组和数据源的网络连通，详情请参见 配置网络连通。如果您的独享数据集成资源组和数据源属于同一地域，可使用同地域VPC内网连通独享资源组和数据...
新建 PolarDB-X 2.0 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 PolarDB-X 2.0 数据源。...单击 测试连接，验证数据传输和数据源的网络连接，以及用户名和密码的有效性。待数据源测试连接成功，单击 确定。
新建 DataHub 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 DataHub 数据源。操作步骤 登录 OceanBase 管理控制台。...单击 测试连接，测试数据传输和数据库的网络连接。待数据源测试连接成功，单击 确定。
监控任务性能
功能 说明 增量同步链路拓扑 增量同步链路主要展示链路中各模块间的数据传输情况和网络延迟信息，模块包含：源库、DTS采集模块、DTS缓存模块、DTS写入模块、目标库。相关参数解释如下：BPS：链路中模块间每秒传输的数据量，单位为MB/s。RPS...
新建 PolarDB-X 1.0 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 PolarDB 数据源。...单击 测试连接，验证数据传输和数据源的网络连接，以及用户名和密码的有效性。待数据源测试连接成功，单击 确定。
新建 MySQL 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输新建 MySQL 数据源。操作步骤 登录 OceanBase 管理...单击 测试连接，验证数据传输和数据源的网络连接，以及用户名和密码的有效性。测试连接通过后，单击 确定。
新建 Oracle 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 Oracle 数据源。操作步骤 登录 OceanBase ...单击 测试连接，验证数据传输和数据源的网络连接，以及用户名和密码的有效性。测试连接通过后，单击 确定。
Kafka单表实时入湖OSS（HUDI）
准备独享数据集成资源组并与数据源网络连通 在进行数据同步前，需要完成您的独享数据集成资源组和数据源的网络连通，详情请参见 配置资源组与网络连通。说明 OSS数据源在下一步新增OSS数据源时，指定Endpoint地址，即可实现OSS数据源与独享...
查看同步链路状态和性能
一键诊断 通过检查源库、目标库、网络和DTS在增量同步时的性能，提供诊断结果和建议。具体操作步骤：单击页面右上角的 一键诊断。在弹出的对话框中单击 确认。刷新页面查看诊断进度，如需查看详细诊断信息，请按下图所示单击 图标。增量...
什么是网络智能服务
网络智能服务 NIS（Network Intelligence Service）是一个对网络进行健康分析、性能监控、诊断修复、流量分析和测量仿真的云服务，通过集成机器学习、知识图谱等AIOps方法减少网络使用...，方便网络架构师和运维工程师更快捷的设计和使用网络...
新建 RocketMQ 数据源
单击 测试连接，测试数据传输和数据库的网络连接。重要 如果您未创建 oms_test_topic，将无法通过测试连接。测试连接通过后，单击 确定。创建 Group 新建 RocketMQ 数据源时，您需要提前创建 defaultGroup，才能够通过测试连接。阿里云 ...
新建 OceanBase 数据源
该用户主要用于读取 OceanBase 数据库增量日志和数据库对象结构信息，请在业务集群 sys 租户下创建。密码 DRC 用户的密码。oblogproxy IP（可选）OceanBase 数据库增量日志代理服务，以服务的形式，提供实时增量项目介入和管理能力，方便...
什么是Dataphin
资产质量 资源治理 资源治理具备资源统计分析能力，可智能识别当前系统内低价值的数据资产和数据任务，并进行优化提示。您可以在治理工作台中，一站式的进行资源的优化处理，全局把控计算与存储成本，提升系统使用效率。资源治理 资产安全 ...
文档更新动态（2022年之前）
系统支持记住最近一次访问的列表（管道脚本、规范建模和数据处理）。通用功能 管理发布任务 2020-09-17 业务板块 功能拓展 系统支持最多设置10位业务板块管理员。通用功能 创建数据板块 2020年07月 时间 特性名称 类别 描述 使用范围 产品...
功能更新动态（2022年之前）
系统支持记住最近一次访问的列表（管道脚本、规范建模和数据处理）。管理发布任务 业务板块 系统支持最多设置10位业务板块管理员。创建数据板块 2020年7月 功能名称 功能描述 发布时间 发布地域 相关文档 基础研发版 基础研发版的定价及...
新建实例场景下配置专有网络
云数据库MongoDB支持经典网络和专有网络两种网络类型，本文介绍新建MongoDB实例时如何配置专有网络。背景信息 在阿里云平台上，经典网络和专有网络的区别如下：经典网络：经典网络中的云服务在网络上不进行隔离，只能依靠云服务自身的安全...
数据上传下载成本优化
尽可能使用经典网络和VPC网络 您可以使用内部网络（经典网络或VPC）实现零成本数据导入和导出。网络设置详情请参见 配置Endpoint。合理利用ECS的公共下载资源 如果您的ECS使用包月资源，可以使用Tunnel等数据同步工具，将MaxCompute数据...
新增和使用独享数据服务资源组
网络连通与白名单配置 独享数据服务资源组与数据源之间进行数据服务时，需要确保独享数据服务资源组与不同网络环境数据源之间的连通性，独享数据服务资源组包括公网、阿里云VPC网络、IDC网络等场景的网络连通方案，不同连通场景下需要添加...
资源组操作及网络连通
如何切换任务在调度系统中执行所用的资源组 在生产运维中心切换任务执行使用的调度资源组和数据集成任务执行资源组：在数据开发界面走发布流程修改生产环境任务执行使用的资源组。说明 以下方式修改资源组请记得发布，标准模式下提交操作...
- 产品推荐
- 这些文档可能帮助您