文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
全局设置
表格定位设置 功能介绍 实际业务中，可能由于机器人绑定表格数量较多、用户问法句式复杂等原因，导致机器人无法将用户问题精准定位匹配至有关表格数据，进而使得机器人无法“正确”地调用表格中有关数据对用户问题进行回复。对于此类问题，...
视频个性化推荐（协同过滤）
本案例将 以视频社交平台的'猜你喜欢'和'详情页相关推荐'为例，通过推荐算法为用户呈现最符合其兴趣的视频内容为背景，为您介绍在DataWorks中如何使用阿里云PAI的协同过滤算法 挖掘深层次的数据关联性，实现视频的个性化推荐。背景信息 ...
黄牛账号识别之GraphCompute解决方案
Step2：选择适合自己的数据源方式 请根据自己的业务特点进行选择：已是或者未来需要MaxCompute，源数据托管到MaxCompute，同时业务数据需要做24小时实时计算更新图数据-请参考【方案一：MaxCompute数据源+API数据】-最佳推荐方式 数据直接...
列存索引中TopK算子的实现
在海量数据上求TopK是一个很经典的问题，特别是衍生出的深翻页查询，给分析型数据库带来了很大的挑战。本文将介绍 PolarDB MySQL版 的列存索引（In Memory Column Index，IMCI）特性如何应对这样的挑战。背景 业务系统中普遍存在这样一种...
DataHub成本节省攻略
同时DataHub技术升级所带来的成本红利会辐射到每个用户身上，根据我们实际的调研发现，大部分用户的使用成本都可以达到30%以上的降幅，部分用户使用成本降幅可以达到90%，本文将会详细介绍这次改动的具体内容，以及相关的最佳实践。...
数据开发功能索引
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，单击左侧导航栏的 数据建模...
RDS MySQL通过专线接入金融云DBS
如果您拥有公有云RDS MySQL实例，并期望通过专线将其接入金融云，以实现更安全、快速和可靠的数据备份与恢复，您可以参考本文提供的方法。本文将介绍如何将公有云RDS MySQL实例连接到金融云DBS，并采用专线配置逻辑备份计划。名词解释 专有...
自建数据库异地备份
本文介绍如何使用 数据库备份DBS 创建自建数据库的异地备份任务，实现异地容灾需求。本示例将位于杭州的自建MySQL数据库备份至华北2（北京）。本文也适用于其他数据库类型的自建库，例如自建Oracle、SQL Server数据库等，关于其他备份参数...
HTAP中的行列混存查询优化
因此，要选择一个最佳的join顺序，其中包含了三个问题：枚举出来的join plan包含最优的plan，为了达到这个目的，枚举的效率要足够高，这样才能尽可能地将最好的join plan包含在搜索空间中。如果join的表实在太多，需要有一个稳定的启发式...
Kafka单表实时入湖OSS（HUDI）
您可以根据需要修改输入数据，或者单击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够帮助您快速评估数据处理节点...
新建开发环境场景并运行
您可以通过新建开发环境场景，并在开发环境场景画布中编排节点工作流、配置运行参数，来验证数据处理流程的正确性。本文以MaxCompute节点搭建流程为例介绍如何新建开发环境场景并运行。前提条件 已创建相关的云计算资源，具体操作，请参见 ...
新建开发环境场景并运行
您可以通过新建开发环境场景，并在开发环境场景画布中编排节点工作流、配置运行参数，来验证数据处理流程的正确性。本文以MaxCompute节点搭建流程为例介绍如何新建开发环境场景并运行。前提条件 已创建相关的云计算资源，具体操作，请参见 ...
2021年
新功能 MaxCompute提供湖仓一体方案，该方案可以打破数据湖与数据仓库割裂的体系，并将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合，助力构建数据湖和数据仓库相融合的数据管理平台。MaxCompute湖仓一体概述 2021年2...
积分互动
页面装修 可对C端活动页面进行自定义配置，可设置未签到时、已签到时的背景图、签到按钮、弹窗样式等 ①未签到状态页面呈现，根据示例的标号可设置对应的图片 ②已签到状态页面呈现，根据示例的标号可设置对应的图片 ③弹窗页面呈现，根据...
数据模型
上述关键字对应SelectDB中的3种 数据模型，本文将对这些数据模型进行详细介绍：Aggregate 模型 Unique模型 Duplicate 模型 Aggregate模型 对于写入的数据，SelectDB会根据不同数据模型，根据建表所选不同模型的Key列中，数据相同的行（Row...
PolarDB PostgreSQL版（兼容Oracle）间的迁移
通过数据传输服务DTS（Data Transmission Service），可以实现 PolarDB PostgreSQL版（兼容Oracle）集群间的迁移。背景信息 PolarDB PostgreSQL版（兼容Oracle）作为一款企业级关系型数据库管理系统，具有广泛的应用和强大的社区支持。每个...
功能发布记录（2023年）
2023-12 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据开发（DataStudio）绑定数据源 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）...
MaxCompute（原ODPS）数据源配置
配置索引结构，可根据用户的检索需求，选择合适的分析器，详情可参考 索引结构，符合需求后点击 下一步：配置数据源（包括：配置字段映射关系，选择分区信息，选择数据同步并发控制机制）；5.1.配置字段映射关系：点击操作栏中的 编辑 按钮...
功能特性
配置管理 数据保护 敏感数据管理 DMS的敏感数据保护能力能根据所选的敏感数据扫描模板、敏感数据识别模型以及脱敏算法对数据进行脱敏处理，以避免敏感数据滥用，有效保护企业的敏感数据资产，防止数据泄露造成企业经营资金损失或罚款。...
使用DBS和DG备份本地或第三方云数据库
数据库备份DBS支持通过数据库网关DG（Database Gateway）备份本地IDC或第三方云厂商的私网数据库到云存储，您只需简单几步即可将数据库低成本地接入至阿里云。完成接入后，在配置DBS的逻辑备份时，您可以直接将数据库网关中接入的数据库...
使用DBS和DG备份本地或第三方云数据库
数据库备份DBS支持通过数据库网关DG（Database Gateway）备份本地IDC或第三方云厂商的私网数据库到云存储，您只需简单几步即可将数据库低成本地接入至阿里云。完成接入后，在配置DBS的逻辑备份时，您可以直接将数据库网关中接入的数据库...
时空数据库版本发布记录
本文介绍PolarDB PostgreSQL版时空数据库（Ganos）的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数，支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级网格分解成高层级...
时空数据库版本发布记录
本文介绍PolarDB PostgreSQL版（兼容Oracle）时空数据库（Ganos）的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数，支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级...
通过数据库网关DG备份本地或第三方云的私网数据库到云...
数据库备份DBS支持通过数据库网关DG（Database Gateway）备份本地或第三方云的私网数据库到云存储，您只需简单几步即可将数据库低成本地接入至阿里云。完成接入后，您可通过配置DBS的逻辑备份计划，直接将数据库网关中接入的数据库作为源库...
DAS Auto Scaling弹性能力
数据库自治服务DAS的Auto Scaling是以数据库实例的实时性能数据作为输入，由DAS完成流量异常发现、合理数据库规格建议和合理磁盘容量建议，使数据库服务具备自动扩展存储和计算资源的能力。背景信息 为业务应用选择一个合适的数据库计算...
PolarDB PostgreSQL版（兼容Oracle）逻辑备份
数据库备份DBS 可满足 PolarDB PostgreSQL版（兼容Oracle）数据库的单表恢复、异地备份、长期归档等需求。本文介绍如何使用DBS备份 PolarDB PostgreSQL版（兼容Oracle）数据库。创建备份计划 具体操作，请参见 创建备份计划。说明 购买时，...
PostgreSQL逻辑备份
注意事项 对于PostgreSQL数据库的逻辑备份，包含RDS PostgreSQL、PolarDB PostgreSQL或其他数据源类型为PostgreSQL的数据库，DBS备份计划的备份维度是库级别，即每个DBS备份计划只能备份一个数据库。如果有多个库需要备份，需要购买多个DBS...
PolarDB分布式版逻辑备份
数据库备份DBS可满足 PolarDB分布式版 实例异地备份、长期归档、分布式备份等需求。前提条件 数据库为PolarDB-X 1.0，存储类型为RDS MySQL，MySQL版本为MySQL 5.x。功能概述 功能 说明 备份SQL文件 采用逻辑备份技术，备份成JSON文件。备份...
MariaDB逻辑备份
数据库备份DBS 可满足MariaDB数据库的单表恢复、异地备份、长期归档等需求。本文介绍如何使用DBS备份RDS MariaDB或自建MariaDB数据库。创建备份计划 具体操作，请参见 创建备份计划。说明 购买时，选择数据源类型为 MariaDB，选择备份方式...
ECS自建数据库的灾备与安全
数据库备份DBS支持MySQL、SQL Server、PostgreSQL等阿里云数据库，以及ECS上的自建数据库、线下数据库、其他云数据库进行备份恢复操作。本文以ECS MySQL为例，介绍如何通过DBS实现ECS数据库的灾备与安全，满足实时备份、快速恢复、异地灾备...
PolarDB MySQL版逻辑备份
数据库备份DBS 可满足 PolarDB MySQL版 数据库的单表恢复、异地备份、长期归档等需求。本文介绍如何使用DBS实现 PolarDB MySQL版 数据库的自动备份。注意事项 如需进行增量备份，请确保 PolarDB MySQL版 已开启Binlog（默认未开启）。更多...
使用pgcrypto及国密SM4加密算法
AnalyticDB PostgreSQL版 内置加密解密模块pgcryoto并集成国密SM4加密算法，允许数据库用户以加密形式存储数据的某些列，为敏感数据增加了一层额外的保护。无密钥时，任何用户都无法读取以加密形式存储在数据库中的数据。注意事项 pgcrypto...
数据对接期
对于传给智能推荐的user和item表，其使用的tag标签需要出自同一个标签池，所有标签个数建议不要大于50000 TAG字段主要是用户对user，item的一种画像的定义，由用户的算法团队或者运营团队人工加上的标签，也可以是user注册时自己选择的。...
配置备份计划
待备份数据库实例的所在位置，支持类型如下：RDS实例 有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的自建数据库 PolarDB 无公网IP:Port的自建数据库(通过数据库网关DG接入)说明 本示例为选择 RDS实例，若您...
SQL Server逻辑备份
无公网IP:Port的自建数据库(通过数据库网关DG接入)：可通过数据库网关备份自建数据库，您需要提前为数据库实例配置数据库网关，并在此配置步骤选择目标 网关DG实例ID，配置方法请参见 通过数据库网关DG备份本地或第三方云的私网数据库到云...
通过公网地址实现数据库跨账号备份
步骤三：恢复数据库 当数据库全量备份完成后，您可以在该备份计划内的 备份任务配置 页面右上角单击 恢复数据库 按钮，选择目标恢复表，DBS将根据可恢复时间范围进行选择，快速恢复这张表至任意1秒的数据。具体操作，请参见 恢复数据库。
游戏行业算法版
在购买页中商品版本选择“行业算法版”，行业类型选择“游戏行业”，根据实际业务需求集群偏好可选择“独享集群-通用型/计算型/存储型”，其他配置信息与 通用型 相同：3.购买后，确认订单：4.开通成功后，在实例管理->应用列表中找到对应...
AIRec智能推荐效果评估指南与策略调整介绍
算法调优 算法调优指的是通过对AIRec推荐算法的召回链路进行参数调整，从召回算法层面对推荐出的结果进行调优，算法调优依赖于实验平台功能，目前仅算法配置版实例可支持。此外，如您有更个性化的算法调优需求，也可以联系我们进一步沟通。...
项目管理（新版）
您需要根据业务情况选择合适的数据类型版本，三种数据类型版本的区别请参见 数据类型版本说明。是否加密 指定创建的MaxCompute项目是否需要开启数据加密功能。更多数据加密信息，请参见 存储加密。当选择需要加密时，需要选择密钥和对应...
- 产品推荐
- 这些文档可能帮助您