互联网金融:上海富友支付服务股份有限公司

解决方案 数据库选型 经过充分的调研和评估,富友决定采用阿里云瑶池数据库旗下的云原生数据库PolarDB承载核心的支付交易,用来替代传统商业数据库。主要原因有:PolarDB 100%兼容MySQL协议和语法,存储计算分离的云原生架构外加新硬件的...

常见术语

云原生数据湖分析(简称DLA)是新一代大数据解决方案,采取计算与存储完全分离的架构,支持数据库(RDS\PolarDB)与消息实时归档建仓,提供弹性的Spark与Presto,满足在线交互式查询、流处理、批处理、机器学习等诉求,也是传统Hadoop方案...

Spark作业异常排查及处理

解决方案:已使用Spark导入的数据,如果需要被Hive或Impala使用,建议在EMR控制台中Spark服务配置页面的 spark-defaults.conf 页签下,增加 spark.sql.parquet.writeLegacyFormat=true 配置后重新导入数据。Shuffle报错 java.lang....

配置数据识别规则

配置敏感字段所属分类 如果您是首次使用数据保护伞的新用户,进入数据识别规则页面后会在左侧区域展示 数据分类分级模板 的默认分类,您可以输入分类名称进行搜索。还支持您单击分类名称后的 图标 添加同层分类、添加子分类、重命名 和 ...

SQL调优

解决方案使用如下命令调小单个并发处理的数据大小。set odps.stage.mapper.split.size=;set odps.stage.reducer.num=<并发数>;每次读取 256 MB 数据太少,导致Instance的执行时间太短,而由于输入数据很大,反而导致了并行度过大,使...

EncDB

当您的数据库中有数据需要被保护时,可以使用RDS MySQL全密态数据库功能,该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全,使被保护数据免受未授权访问。详情请参见 全密态数据库。

资产质量概述

资产质量基于Dataphin平台,为数据的开发及使用提供全套的数据质量解决方案数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务,详情请参见 开通Dataphin。背景信息 面对各行...

资产质量概述

资产质量基于Dataphin平台,为数据的开发及使用提供全套的数据质量解决方案数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块。背景信息 面对...

数据使用诊断

DataWorks的数据使用诊断,为您提供了对当前DataWorks工作空间的数据内容及数据隐私的安全保护能力,以及诊断相关安全问题的最佳实践及解决方案,帮助您快速建立数据使用时和使用后的基本安全体系。进入数据使用诊断 登录 DataWorks控制台...

功能优势

当您的数据库中有数据需要被保护时,可以使用RDS MySQL全密态数据库功能,该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全,使被保护数据免受未授权访问。本文将详细介绍RDS MySQL全密态数据库功能的优势,帮助您...

增加或删除已运行任务的同步表

同步数据至Kafka解决方案为您提供了一键增加及删除同步表功能,方便您为已成功配置运行的同步任务快速添加新表或删除已有同步表。本文为您介绍如何增加或删除已运行任务的同步表。前提条件 已创建并运行同步数据至Kafka解决方案的任务,...

RDS搭配异构数据库实现数据多样化存储

RDS可以和OSS搭配使用,组成多类型数据存储解决方案。例如,当业务应用为论坛时,RDS搭配OSS使用,论坛用户的图像、帖子内的图像等资源可以存储在OSS中,以减少RDS的存储压力。RDS和OSS搭配使用相关案例请参见 多结构数据存储。

DLF中数据入湖功能停止更新公告

本文为你说明DLF中的数据入湖功能停止更新说明...建议 如果您有类似数据入湖的场景,可以使用如下的解决方案来实现数据的实时入湖以及离线入湖场景:实时计算Flink版:参考如 MySQL CDC DataStream Connector。DataWorks产品:数据集成概述。

数据管理DMS解决方案系列

为了更好地指导您使用数据管理DMS(Data Management),DMS推出解决方案系列文档,旨在通过最佳实践(Step by Step)的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 数据安全解决方案 数据开发解决方案 更多...

Dataphin支持的数据

Flink_SQL任务开发方式 全域质量 全域质量即资产质量,是基于Dataphin平台,为数据的开发及使用提供全套的数据质量解决方案数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。资产质量概述 数据服务 数据服务...

常见问题

具体插件报错原因及解决方案 添加MongoDB数据源时,使用root用户时报错。离线同步常见问题 读取MongoDB时,如何在query参数中使用timestamp实现增量同步?MongoDB同步至数据目的端数据源后,时区加了8个小时,如何处理?读取MongoDB数据...

Dataphin支持的数据

Flink_SQL任务开发方式 全域质量 全域质量即资产质量,是基于Dataphin平台,为数据的开发及使用提供全套的数据质量解决方案数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。资产质量概述 隐私计算 DataTrust...

数据倾斜调优

使用 DISTRIBUTED MAPJOIN 语法解决数据倾斜,如下所示。SELECT/*+distmapjoin(t1)*/request_datetime,host,URI,eagleeye_traceid from<viewtable>t0 LEFT join(SELECT traceid,eleme_uid,isLogin_is from<servicetable>where ds='${today}...

【通知】敏感数据保护功能商业化

存量实例的操作建议 免费使用期未结束:如果您不再需要敏感数据保护功能,为避免产生额外的费用,您可以关闭敏感数据保护功能,具体请参见 关闭敏感数据保护。如果您希望继续使用敏感数据保护功能,您可以购买敏感数据保护服务。在顶部菜单...

Transaction Table2.0概述

但对于综合业务场景,比如时效性要求为分钟级或者小时级的近实时数据处理场景和海量数据批处理场景的解决方案使用单一或者联邦多引擎都会存在一些问题。如上图所示,如果使用单一的MaxCompute离线批量处理链路,有些场景需持续将用户分钟...

功能概述

当您的数据库中有数据需要被保护时,可以使用RDS MySQL全密态数据库功能,该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全,使被保护数据免受未授权访问。本文介绍全密态数据库的概念、应用场景和安全分级。什么...

任务运行失败

解决方案:您可以进入 数据源管理 页面,检查所使用数据源配置是否正确。进入 数据源管理 页面的操作,详情请参见 创建与管理数据源。如果没有可用的数据源,则您需要新建FTP数据源,详情请参见 配置FTP数据源。FTP Check节点任务,运行...

金融大数据

架构优势:合理解决了金融行业内外部数据整合问题 优化了结数据架构分层 提供了高效的数数据加工与服务方式 技术架构 架构说明:阿里云大数据数据仓库解决方案经历了阿里巴巴集团内部的实战验证,完全基于自主研发,且在不断优化、完善,以...

企迈云商

解决方案 企迈使用阿里云DAS数据库自治服务,支持多种数据库类型、多个数据库实例的批量管理,提供 巡检评分、监控大盘 等能力,能够快速定位到异常实例。DAS通过 7*24小时异常检测,自动检测到实例出现异常,并触发根因分析,定位异常的...

数据湖构建之MaxCompute湖仓一体最佳实践

背景信息 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的EB级数据仓库解决方案。与数据湖相比数据仓库具备易优化、易治理等优点,但同时面临数据种类单一,灵活性低,仅向特定引擎开放等不足,提高了数据存储和加工的成本,...

离线同步常见问题

具体插件报错原因及解决方案 添加MongoDB数据源时,使用root用户时报错 读取MongoDB时,如何在query参数中使用timestamp实现增量同步?MongoDB同步至数据目的端数据源后,时区加了8个小时,如何处理?读取MongoDB数据期间,源端有更新记录...

应用场景

典型场景 用户角色 诉求 典型场景 解决方案 应用开发者 保证应用系统中敏感数据的安全。作为开发者,我的程序需要使用一些敏感的业务数据和运行数据。我希望敏感数据被加密保护,而加密密钥则通过KMS来保护。敏感数据加密保护 IT运维人员 ...

什么是云原生数据湖分析

支持 Cassandra 支持 支持 Kudu 支持 支持 ECS自建Druid数据数据 支持 支持 何时使用DLA DLA主要围绕数据湖存储OSS提供一站式的云原生数据湖分析与计算方案,如果您有如下的痛点可以使用DLA:寻求一站式的数据解决方案,从数据高效入湖...

ODC 常见问题

解决方案 调整数据库认为客户端使用的字符集,将其与实际客户端的字符集兼容。set names utf8mb4;调整完成后,在当前 session 内再执行 SQL,查看结果集时即可避免中文乱码问题。命令行窗口中执行 SQL 结果集中包含中文字符乱码 ODC 安装...

ETL工具支持概览

数据迁移及同步方案综述:数据传输服务(DTS):阿里云提供的实时数据同步服务,可以将其他数据源(RDS MySQL,ECS自建MySQL,PolarDB等)实时同步数据到 AnalyticDB PostgreSQL版,构建实时数据仓库解决方案。阿里云的数据集成服务(Data ...

MySQL节点

解决方案 重新选择使用连接串模式创建的数据源。您可以参考 配置MySQL数据源 进入 数据源管理 页面,单击目标数据源 操作 列的 编辑,在数据源编辑页面查看创建数据源时所使用的模式。常见问题:测试连通性通过但任务执行报错 可能原因1:...

概览

为了更好地指导您使用数据管理DMS(Data Management),DMS推出解决方案系列文档,旨在通过最佳实践(Step by Step)的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 DMS为在线流程化系统,可统一管理企业内...

排查Redis实例CPU使用率高的问题

警告 如果您的实例为 Tair内存型(Redis企业版),关闭AOF后,您将无法通过AOF文件恢复Redis数据(即无法使用 数据闪回功能),仅能通过备份集恢复数据(即 从备份集恢复至新实例),请谨慎操作。评估服务能力 经过上文的步骤排查优化后,...

混合云解决方案

场景说明 ApsaraDB for SQL Server混合云解决方案用于实现本地SQL Server服务与RDS SQL Server服务之间的数据传输或者同步。利用SQL Server复制技术实现数据的同步,其典型应用场景就是写数据在本地,读数据在RDS SQL Server。方案架构 ...

亿海蓝-航运大数据的可视化案例

解决方案 DLA Ganos 引擎对不同时空存储的存取进行了统一封装,降低编码难度。原始数据使用DLA Ganos进行高效预处理,降低数据提取和结果数据再落地时间。数据抽取结果存储到Ganos on Lindorm中,Lindorm的低延迟、高性能、高吞吐查询能力...

收费常见问题

本文为您介绍数据集成收费相关问题及解决方案数据集成是怎么收费的?数据集成收费包含三种途径,详情请参见 独享数据集成资源组计费说明:包年包月、公共数据集成(调试)资源组:按量计费、公网流量计费说明。

如何解决Redis内存使用率突然升高

解决方案 请依次排查内存使用率突然升高的原因,并参考对应的解决方案解决问题。排查是否写入大量新数据 排查方法:查看 Redis 性能监控的 入流量 与 写QPS。如果入流量与写QPS的趋势与内存使用率的趋势一致,说明大量的数据写入导致内存...

到期、欠费说明

您可以选择以下任意一种解决方案:购买敏感数据保护服务后,启用被禁用的实例。重要 此操作会变更实例之前的配置。将被禁用实例的敏感数据保护功能关闭后,启用被禁用的实例。将某个或多个实例的敏感数据保护功能关闭,释放敏感数据保护...

查询用户OSS或专属存储的归档数据

新用户:数据归档查询功能上线后,使用数据归档功能的用户。费用说明 公测阶段暂不收费。注意事项 仅数据归档工单创建人或相关人查询归档后的数据。仅支持使用逻辑数仓查询归档至用户OSS或逻辑数仓的数据。查询归档至用户OSS的数据 登录 ...

与标准SQL的主要区别及解决方法

解决方案请参见 在执行MaxCompute SQL过程中,使用NOT IN后面接子查询,子查询返回的结果是上万级别的数据量,但当IN和NOT IN后面的子查询返回的是分区时,返回的数量上限为1000。在必须使用NOT IN的情况下,该如何实现此查询?如果业务上...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 RDS 数据安全中心 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用