Tunnel命令
当您需要在本地环境与MaxCompute之间传输大量的数据时，MaxCompute提供Tunnel功能支持上传下载数据，使用Tunnel命令可以实现批量或增量数据的高效上传、下载，以提高数据传输效率和可靠性。本文为您介绍Tunnel上传下载命令的详细说明。...
Tunnel命令
当您需要在本地环境与MaxCompute之间传输大量的数据时，MaxCompute提供Tunnel功能支持上传下载数据，使用Tunnel命令可以实现批量或增量数据的高效上传、下载，以提高数据传输效率和可靠性。本文为您介绍Tunnel上传下载命令的详细说明。...
归档为CSV或ORC格式
归档分区表是对表的分区进行归档，归档后的表为混合分区表，归档后分区的数据文件保存在OSS上。执行完归档操作后，分区在PolarStore上占用的空间会自动释放。语法 归档为 CSV 格式的文件：ALTER TABLE table_name CHANGE PARTITION part_...
数据安全
数据安全中心（DSC）不会保存您的数据和文件。在您授权访问数据源后，DSC 会对数据进行扫描，并仅将扫描的分析结果展示在 数据安全中心控制台，供您使用。如何对 DSC 的操作记录进行审计？DSC 的所有操作都会通过API形式记录在操作审计服务...
系统配置
您可在数据保护伞的系统配置页面，设置数据保护伞的识别内容、识别范围，水印文件保存时间，是否展示风险识别的数据安全等级，以及告警信息的接收邮件及WebHook地址，以便及时发现并处理潜在安全风险。进入系统配置页面 进入数据开发页面。...
导入数据
数据文件的保存路径有两种选择：您可以将文件直接归档至MaxCompute客户端的 bin 目录中，上传路径为 文件名.后缀名；也可以将文件归档至其他路径下，例如D盘的test文件夹，上传路径为 D:\test\文件名.后缀名。假设，本文中的示例数据文件 ...
功能特性
安全控制 文件存储 HDFS 版 具有文件系统标准权限控制、权限组访问控制和RAM用户认证等多种安全机制，从而保证文件系统数据安全万无一失。线性扩展 文件存储 HDFS 版 能够为应用负载提供高吞吐量、高IOPS及低时延的存储性能。同时，其性能...
常见问题
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段，扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、...
Tunnel操作
数据文件的保存路径有两种选择：您可以将文件直接下载至MaxCompute客户端的 bin 目录中，此时 path 需要设置为 文件名.后缀名；也可以将文件下载至其他路径下，例如D盘的test文件夹，path 需要设置为 D:\test\文件名.后缀名。使用示例 示例...
通过管理外接设备保障数据安全
为了避免企业员工在日常办公中，通过外接设备（例如U盘、蓝牙等）外发敏感文件导致业务遭受重大损失，建议您通过 SASE 的办公数据保护功能（DLP）及时对外接设备进行管控，使您能够实时掌握敏感数据外发动态，监控数据泄露风险。...
通过管理水印保障数据安全
为了避免企业员工在特殊办公场景中，通过屏幕信息或者打印文件导致敏感信息泄露使业务遭受重大损失，建议您通过 SASE 的办公数据保护功能（DLP）开启屏幕水印和打印水印，使您能够实时掌握敏感数据外发动态，监控数据泄露风险。本文介绍...
功能特性
通过检测外发文件保障数据安全 检测策略 用于配置具体的敏感文件检测条件及生效范围，支持管理员定义企业的敏感文件的特征模版、具体的策略生效通道（如即时通讯通道、云盘、云笔记、U盘等）以及策略生效的员工范围。外设管理 提供电脑外接...
什么是办公安全平台
通过检测外发文件保障数据安全 基于Cloud DLP的产品架构为企业用户提供一款轻量级的办公数据检测方案，帮助企业实时掌握敏感数据外发动态，监控数据泄露风险。通过管理外接设备保障数据安全 管控企业员工的外接设备的数据访问权限，帮助...
新手指引
通过检测外发文件保障数据安全配置流程 如果您需要检测企业员工通过多渠道（例如即时通讯、邮件通道等）传输内部文件是否存在敏感数据。您可以使用敏感文件检测功能，设置敏感数据字典，并搭建数据模板，创建检测策略。然后统计企业员工的...
数据导入
安全模式：暂停任务后重启，将从暂停位置继续执行脚本或导入数据文件。当出现任务执行完成提示后，表示数据导入工单完成。工单完成后，您可前往SQL Console页面查询导入的数据。查询数据的操作，请参见 SQL Console初体验。示例文件 SQL...
设置列索引的排序键
遍历完成后，对合并文件按段两两排序，并将排序后的数据保存在临时文件中，随后将合并文件与临时文件进行切换；重复执行步骤3，直到合并文件有序排列，然后读取合并文件中的每一行记录，根据偏移值读取数据文件中对应的记录并追加到列存...
RDS MySQL修改字符集（平滑方案）
安全模式：暂停任务后重启，将从暂停位置继续执行脚本或导入数据文件。导入成功后，您可以通过执行 show create table<表名>;命令来确认表的字符集信息。步骤二 将源实例中表的数据迁移至新的实例 登录 数据传输控制台。说明 若数据传输...
功能发布记录（2024年）
您在数据开发和数据分析中执行SQL语句查询数据时，若该数据被识别为敏感数据，平台将会按照脱敏规则进行遮盖、加密等模式的脱敏展示，加强企业数据安全管控。2024.1.25 所有地域 所有DataWorks用户 数据脱敏能力概述 数据保护伞概述 数据...
敏感数据溯源
您可以将DataWorks中的数据文件导出或下载至本地，再上传至溯源任务中进行溯源，也可以将外部系统的数据保存至CSV文件，再上传至溯源任务中进行溯源。目标文件上传成功后，您还可以选择 替换 或 下载 该文件。单击 开始溯源，启动目标溯源...
Data Exchange数据集用于数据标注
点击提交，数据应用功能会保存manifest标注数据文件到指定位置，并创建PAI-iTAG数据集，创建成功后跳转到PAI-iTAG的数据集管理页面。说明 PAI-iTag当前支持图像类（jpg/cur/webp/png/svg/gif/bmp/jpeg/ico/web）、视频类（mp4）、音频类...
文档修订记录
Check节点 2024.1.12 新增功能 最佳实践 新增DataWorks大数据安全治理实践新增指南，为您介绍数据安全治理的常见思路、DataWorks产品的安全能力，以及在DataWorks上基于“基础防护建设”、“数据安全防护措施”、“数据安全持续运营”三个...
数据下载
在DataWorks的数据开发（DataStudio）、数据分析、安全中心模块下载的CSV、XLSX格式文件数据将同步保存至数据下载功能。通过该功能，您可将所需历史下载文件重新下载至本地使用，也可追溯历史下载记录的操作详情。前提条件 已通过如下模块...
创建并管理电子表格
在 保存文件 对话框中，输入 文件名。单击 确认。查看和管理电子表格 在电子表格的编辑页面，单击左上方的 电子表格 或左侧菜单栏中的 图标，进入电子表格列表页面。在 电子表格 页面的 全部电子表格 区域，您可以查看 我创建的 和 分享给...
OSS数据安全防护最佳实践
DSC 在您完成数据源识别授权后，从您存储在OSS的海量数据中快速发现和定位敏感数据，对敏感数据分类分级并统一展示，同时追踪敏感数据的使用情况，并根据预先定义的安全策略，对数据进行保护和审计，以便您随时了解OSS数据资产的安全状态。...
快速入门
相比自建HDFS存储，使用 文件存储 HDFS 版 服务可以大量节约维护成本，降低数据安全风险。文件存储 HDFS 版 服务适用什么场景？文件存储 HDFS 版 适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户进行海量数据存储和离线...
使用AOF文件进行迁移
redis-cli是原生Redis的命令行工具，您可以使用redis-cli将自建Redis中已保存至AOF文件的数据迁移到 云数据库 Redis 版。本方案具有灵活、高效与自动化等特点，可保障数据的一致性与完整性，但本方案不支持实时同步，仅支持迁移离线数据。...
创建OSS外部表
背景信息 对象存储服务OSS 是一种海量、安全、低成本、高可靠的云存储服务，适合存放任意类型的数据文件。当您需要使用MaxCompute读取存储在OSS目录中的数据或需要将MaxCompute项目中的数据写入OSS目录时，可以在MaxCompute项目中创建OSS...
表数据格式
其中：DeltaFile：每次事务Commit写入（Update/Delete）的数据文件类型，会保存每行数据的中间历史状态，用于满足近实时增量读写需求。Clustering 合并操作也会生成DeltaFile，按照列式压缩存储。BaseFile：DeltaFile经过 COMPACTION 合并...
脚本文件管理
在多方安全分析控制台中，您需要使用 SQL 语言编辑脚本文件，并基于建模数据实现多方参与的数据安全分析。新建脚本 文件 登录多方安全分析控制台，并在右上角的下拉框中选择需要进入的项目。在 脚本文件 区域，右键点击空白区域，在弹出的...
应用场景
通过内置算法规则和自定义敏感数据识别规则，对其存储的数据库类型数据以及非数据库类型文件进行整体扫描、分类、分级，并根据结果做进一步的安全防护，如细粒度访问控制、加密保存等。数据泄露检测与防护 通过智能化检测模型分析企业内外...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
管理数据
修改已下载的模板文件中的数据域信息并保存。编辑模板文件时，您需要关注以下信息：最多支持三级数据域。一个资产只能属于一个数据域。在 是否删除 列可以设置是否删除数据域或从数据域中移出该资产。在数据域目录节点（即没有资产信息的行...
数据防泄漏典型案例
使用数据安全中心可以监测和防范各类数据泄露风险，例如身份盗用、越权操作、违规操作、操作失误、基础设施缺陷以及数据故意泄密等。检测到异常行为并触发异常告警后，您需要仔细分析审计日志，从而评估被记录操作的正当性，并采取相应的...
什么是备份数据量
概念 说明 数据库磁盘空间 数据库磁盘空间由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。对于RDS来说，是购买时选择的存储空间；对于ECS来说，是购买时选择的系统盘和数据盘存储空间。数据文件空间 数据...
使用Azkaban调度MaxCompute
保存为TXT文件。例如emp.txt，包含的数据如下：7369,SMITH,CLERK,7902,1980-12-17 00:00:00,800,20 7499,ALLEN,SALESMAN,7698,1981-02-20 00:00:00,1600,300,30 7521,WARD,SALESMAN,7698,1981-02-22 00:00:00,1250,500,30 7566,JONES,...
日志管理
冷数据 冷数据是基于阿里云自研的安全数据湖能力，联合OSS提供的日志存储及数据湖构建服务提供的日志分析能力。开通冷数据功能后，威胁分析与响应服务会在OSS服务创建两个Bucket：security-lake-阿里云账号ID-数据湖名称：该Bucket存储投递...
使用MaxCompute控制台（离线）
MaxCompute控制台提供数据上传功能，支持您将本地文件或阿里云对象存储服务OSS中的文件数据离线（非实时）上传至MaxCompute进行分析处理及相关管理操作。使用限制 仅支持基于 本地文件 或 阿里云对象存储OSS 上传数据，具体如下。本地文件...
编辑脚本
脚本输入/输出配置说明 不同类型的脚本需配置的输入输出不同，如下：只有脚本类型为 创建联邦表、预处理规则 和 预处理应用 的脚本需配置输出数据，且该类型脚本的输出数据保存在联邦表文件夹中。脚本类型 输入配置 输出配置 创建联邦表 ...
层级生成器功能介绍
导入层级.json 单击层级树面板下方的 导入层级.json 按键，您可以在本地电脑内选择一个保存完整的层级数据文件，层级文件支持DataV专有格式和开放格式两种。导出层级（DataV专有）单击层级树面板下方的 导出层级（DataV专有）按键，您可以...
支持的地域
本文提供数据安全中心的主要功能模块所支持的地域列表。您的数据库资产只有在支持的地域内，才能使用数据安全中心对应的功能。说明 本文用到的标识说明：表示当前地域不支持该功能。表示当前地域支持该功能。重点功能模块支持的地域（公共...
- 产品推荐
- 这些文档可能帮助您