Transaction Table2.0概述
针对这些问题近几年大数据开源生态也推出了各种解决方案，最流行的就是Spark/Flink/Presto开源数据处理引擎，深度集成开源数据湖Hudi、Delta Lake和Iceberg三剑客，践行统一的计算引擎和统一的数据存储思想来综合提供解决方案，解决Lamdba...
DataWorks on EMR数据安全方案
数据安全能力：任务管理 DataWorks提供了大数据开发运维等能力，其中工作空间、安全中心等功能模块可实现对大数据计算任务的管理。工作空间：通过DataWorks的工作空间规划可以实现工作空间的人员管理、设置大数据作业可见性和可运维性。...
技术发展趋势
近些年来，数据在国民经济各个领域扮演着愈发重要的作用，其使用特点较之以往也发生了诸多变化，其趋势主要有几个方面。规模爆炸性增长 随着8K、5G、IoT、大数据、AI等系列技术的发展，数据量迎来了爆发式增长。IDC在《Data Age 2025》的...
数据重排
在MaxCompute的使用过程中，如果已经积累了大量数据占用了大量存储资源，且已经通过削减数据存储生命周期和删除非必要数据等方式进行了治理，在您的存储预算有限，计算资源还有冗余的情况下，可以考虑使用数据重排方式对存储空间进行优化。...
客户案例
大数据处理能力：随着阿里巴巴集团业务的高速发展，推广营销在商业引流上的重要性越发明显，报表作为营销产品的闭环，其诉求也越发的多样化、个性化，报表数据在近几年的发展中在量级上已经增长到TB甚至数十 TB 的规模。这个时候存储系统的...
公交出行：启迪公交
所属行业：公交出行 网站地址：启迪公交 客户感言“启迪公交从市场上诸多数据库产品中选中成熟稳定、经历过多年双十一考验的阿里云 PolarDB-X 分布式数据库方案，解决了数据库高并发访问和水平扩展的需求”。客户介绍 启迪公交（北京）科技...
聚合支付：Ping+
业务架构 建议及诉求 因存在历史数据，期望可以将几年前的冷数据进行归档，期望 PolarDB-X 提供数据冷热存储的能力。后续规划 后续其他核心业务及产品线也将使用 PolarDB-X。在Ping+业务高速发展的发展过程中，支付核心交易系统商户订单的...
客户案例
基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率，构建大润发的数据中台体系。新金融行业：某互联网金融公司湖仓一体案例 客户架构如下。客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的，同时引入的数据中台...
发展历程
关键性里程碑 2009年9月，ODPS（即现在的MaxCompute）大数据平台飞天项目正式启动。2010年10月，阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月，平台的单集群规模已达到5000台。2014年7月，平台开始对外提供服务，完全替换...
高压缩引擎（X-Engine）介绍
然而，在实际业务中，历史数据并不完全是静态的，针对几个月甚至几年前的历史数据，依旧可能存在实时地、低频地查询甚至更新需求。例如，在阿里巴巴内部，对淘宝或天猫历史订单的查询、对企业级办公软件钉钉历史聊天记录的查询或对菜鸟海量...
PolarDB-X历史
去IOE"的目的绝不仅仅是摆脱几个传统IT厂商的产品，而是在互联网+、云计算快速兴起后，企业用户迫切需要能够保证其业务发展和创新的更加开放、灵活、高效的IT基础架构。概括地说，"去IOE"推动了用横向扩展取代纵向扩展，用开源软件代替...
X-Engine简介
为什么设计一个新的存储引擎 X-Engine的诞生是为了应对阿里内部业务的挑战，早在2010年，阿里内部就大规模部署了MySQL数据库，但是业务量的逐年爆炸式增长，数据库面临着极大的挑战：极高的并发事务处理能力（尤其是双十一的流量突发式暴增...
数据科学计算概述
发展路径 MaxCompute提供的Python开发生态发展路径如下：PyODPS PyODPS于2015年正式发布，作为MaxCompute的Python SDK，支持通过Python接口对MaxCompute数据进行相关操作。经过多个版本的迭代发展，目前PyODPS已支持DataFrame框架，同时...
捷顺
为降低客户运维成本，近几年把停车和门禁系统SaaS化。SaaS服务承载大租户全国的业务，有突发的高并发访问需求，对数据库的性能和稳定性要求大幅提升。原有监控体系的监控能力不足导致如下影响：多租户多库共享一个实例造成资源竞争，给业务...
列存索引技术架构介绍
随着MySQL发展为世界上最为流行的开源数据库系统，用户在其中存储了大量的数据，并且运行着关键的业务逻辑，对这些数据进行实时分析成为一个日益增长的需求。当单机MySQL不能满足需求时，用户寻求一个更好的解决方案。如 MySQL+专用AP数据...
互联网服务：小打卡
小打卡上有几百万活跃用户，业务发展较快，高并发读是小打卡的数据库强需求。在单机RDS的情况下，由于单表数据量大，会出现读性能瓶颈导致APP卡顿甚至崩溃。基于 PolarDB-X+RDS的分布式数据库解决方案能在表拆分成小的物理表后，提供海量...
数据分析整体趋势
随着Google等互联网企业崛起，以Hadoop为代表的基于传统x86服务器集群的大数据技术迅速发展，同时开源分布式数据库如Greenplum等也成为相应替代方案，为广大中小企业，尤其是互联网行业大大降低了数据分析的技术和成本门槛，还有分布式技术...
银泰商业
到2019年，随着银泰业务的持续发展，IDC中残余的少量数据库资源对系统的性能及稳定性带来了很大的威胁，于是银泰寻求快速云化的方案，最终在2019年9月份实现了数据库的100%云化。业务挑战 以前进行核心交易库从Oracle转成云上MySQL，投入的...
应用场景
OceanBase 数据库的 SQL 引擎在经过了近 10 年的发展之后，已经拥有了很好的 SQL 执行能力和分布式计算能力，可以支撑这种复杂的 HTAP 应用。由于 OceanBase 数据库的原生分布式数据库特点，可以完美地解决传统数据库的单点性能瓶颈问题，...
2022年
本章节介绍了2022年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。更多新功能介绍 详情请参见 数据传输服务产品动态。2022年11月 类型 重点内容 相关文档 新增 实例支持体验3次规格升级。体验实例规格升级 2022...
2023年
本章节介绍了2023年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。2023年12月 类型 重点内容 相关文档 新增 新增支持将MongoDB（副本集架构或分片集群架构）的数据同步到Lindorm（宽表引擎），以帮助您的应用...
RDS术语
AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
什么是Dataphin
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
什么是DataWorks
阿里云上发展历程 2015年DataWorks正式上云，将多年沉淀的大数据建设方法论产品化输出，服务阿里云上客户，通过不断迭代的产品能力，DataWorks正在与各行各业的客户与合作伙伴一起，通过全链路数据治理，管得好数据、用得好数据，让数据从...
东软案例
阿里云Lindorm数据库驱动的IT运维监控系统 客户简介 东软创立于1991年，是中国第一家上市的软件公司，一直以来致力于以信息技术的创新，推动社会发展，创造美好生活。东软集团以软件技术为核心，业务领域覆盖智慧城市、医疗健康、智能汽车...
某网约车公司车辆轨迹数据
随着车辆数量的快速增长，每辆车每分钟上传轨迹、位置等信息到MySQL导致MySQL库数据量过大，将全量...近几年线下的车辆还不断增加，但是由于 云原生多模数据库 Lindorm 是一种分布式的数据库，所以车辆的数 据增加不需要再变动已有的架构。
低成本历史库
在移动互联网高度发达的今天，每天都会有大量的业务数据产生，随着时间的积累和业务的发展数据量急剧增长，同时历史数据的访问频率随着时间的推移却越来越低。这些数据全部存储在关系型数据库中会带来了一系列的问题。重要 2023年3月10日后...
2019年
本章节介绍了2019年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。更多新功能介绍 详情请参见 数据传输服务产品动态。2019年 发布时间 发布内容 相关文档 2019年12月 支持迁移PostgreSQL 11版本数据库。从自建...
行业趋势与背景
本文介绍了数据库行业的发展及 PolarDB-X 的技术发展历程。行业趋势 数据库系统至关重要 数据库与操作系统、中间件并称为系统软件的三驾马车，是企业IT系统不可或缺的组件，也是互联网应用级企业信息管理系统存储数据和管理数据的核心平台...
DataWorks交流钉钉群
说明 从2009年飞天大数据平台写下第一行代码开始，DataWorks历经10年发展，形成一套成熟的产品功能体系，满足企业数据中台搭建需求。在阿里巴巴内部，每天有数万数据、算法开发工程师正在使用DataWorks。您需要先单击 申请链接 加入“阿里...
某新能源汽车造车新势力
客户感言 阿里 云原生多模数据库 Lindorm 相比于其他存储引擎和HBase开源版本，提供了更高效的压缩率和同规格下的更大吞吐量，能稳定的支撑高并发、海量数据存储的业务需求。同时提供了成熟的冷热分离方案，大大降低了存储和运维成本，对于...
低成本RDS历史库
背景信息 在移动互联网高度发达的今天，每天都会有大量的业务数据产生，随着时间的积累和业务的发展数据量呈大幅增长，同时历史数据的访问频率随着时间的推移却越来越低。这些数据全部存储在关系型数据库中会带来了一系列的问题。挑战：...
应用场景：低成本历史库
背景信息 在移动互联网高度发达的今天，每天都会有大量的业务数据产生，随着时间的积累和业务的发展数据量急剧增长，同时历史数据的访问频率随着时间的推移却越来越低。这些数据全部存储在关系型数据库中会带来了一系列的问题。挑战 存储...
上海新能源汽车车辆基础数据
客户感言 2019年开始上海市新能源汽车大数据平台从自建Hadoop集群迁移至阿里云Lindorm+DLA Spark产品，有效解决了我们平台存储和计算的横向动态扩容瓶颈，同时借助其产品中间件LTS实现了我们平台数据的冷热分离，有效降低了数据存储成本，...
亿海蓝-航运大数据的可视化案例
——亿海蓝CTO 客户简介 亿海蓝是中国的航运大数据公司，做为中国最大的AIS数据服务运营商，发展目标是通过大数据技术推动全球航运物流与互联网的融合，加速航运产业转型升级。亿海蓝目前已为全球上百万行业用户提供数据服务，客户涵盖港口...
全球数据库市场发展与机遇
阿里云数据库技术已先后走过了“商业-开源-自研”的演进路线，不断突破数据库技术和应用生态，实现了数据库领域的自主可控。2008年，率先发起“去IOE”战略，采用开源数据库技术替代Oracle数据库，成功解决商业数据库高成本压力和业务支持...
新零售：杭州数云信息技术有限公司
所属行业：新零售 网站地址：数云信息技术有限公司 公司介绍 杭州数云信息技术有限公司成立于2011年，伴随着电子商务、大数据应用和零售企业互联网化的趋势快速发展，目前已成为国内领先的数据化营销软件产品和服务提供商。数云致力于为...
基本介绍
背景信息 云数据库HBase增强版是由 云原生多模数据库Lindorm宽表引擎 提供的、完全兼容HBase的云上托管数据库，从2011年开始云数据库HBase增强版正式承载阿里内部业务的海量数据实时存储需求，支撑服务了淘宝、支付宝、菜鸟、优酷、高德等...
互联网金融：上海富友支付服务股份有限公司
迁移方案 数据传输服务DTS是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助力用户构建安全、可扩展、高...
Tair（Redis企业版）简介
阿里云数据库Redis企业版（又称阿里云Tair），是基于阿里集团内部使用的Tair产品研发的云上托管企业级内存数据库，从2009年开始正式承载阿里集团业务，历经天猫双十一、优酷春晚、菜鸟、高德等业务场景的磨练，是一款真正的企业级内存数据...
- 产品推荐
- 这些文档可能帮助您