保险行业解决方案与案例
与此同时国寿数据应用全面进入实时化，通过DTS将 PolarDB PostgreSQL版（兼容Oracle）实时变化的数据同步到KAFKA平台，下游业务系统和大数据平台通过数据订阅以满足监管报送等各种场景；通过上线前完整兼容性评估，上线过程中全量SQL回归压...
面临的业务挑战
系统极复杂 大数据平台普遍存在使用复杂的问题。用户希望专注于核心业务，而非底层技术。用户希望使用的是“开箱即用”的方案，而不是陷入到高昂的学习成本、繁复的技术细节之中。用户渴望拥有一个简单易用的平台。此外，大数据平台的组合...
授权信息
本文为您介绍 开源大数据平台 E-MapReduce（EMR）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce（EMR）的RAM代码（RamCode）为 emr,emr-apm-server,ecm,emr-serverless-spark,dls...
什么是EMR on ACK
阿里云E-MapReduce（简称EMR）on ACK提供了全新构建大数据平台的方式。您可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维投入，以便于您可以更加专注...
Paimon概述
目前阿里云开源大数据平台E-MapReduce常见的计算引擎（例如Flink、Spark、Hive或Trino）都与Paimon有着较为完善的集成度。您可以借助Apache Paimon快速地在HDFS或者云端OSS上构建自己的数据湖存储服务，并接入上述计算引擎实现数据湖的分析...
基于MaxCompute进行大数据BI分析
通过MaxCompute、AnalyticDB MySQL强大的数据加工和分析能力，降低大数据平台建设的门槛，轻松解决了海量数据的计算问题。同时有效降低企业成本，并保障数据安全。与第三方开源生态无缝对接，在不侵入用户应用的情况下，传输日志至日志服务...
审批中心概述
您可以直接使用DataWorks官方提供的扩展程序来对高危行为进行管控，也可以基于DataWorks开放平台自行开发、部署能够应对更加复杂场景的扩展程序作为风险识别规则，从而将自身企业内部风控平台能力延伸至云上DataWorks大数据平台。...
迁移数据至阿里云NAS
以ECS为例，您可以用Linux系统挂载NFS文件系统或Windows系统挂载SMB文件系统，然后就像访问本地数据一样访问NAS上的文件数据。具体操作，请参见 Linux系统挂载NFS文件系统 和 Windows系统挂载SMB文件系统。您也可以在云上搭建业务应用，在...
自助建站方式汇总
网站类型 部署方式 说明 搭建Joomla基础管理平台 搭建Joomla基础管理平台 本教程主要介绍如何通过云市场镜像搭建Joomla基础管理平台。搭建Ghost博客 Ghost是一个基于Node.js开发的免费开源博客平台，用于简化博客的写作发布等流程。网站...
简介
与云上Spark无缝集成，快速搭建空间大数据仓库和空间大数据分析平台。基于OGC标准设计，便于系统间的集成与互操作。基于阿里云HBase专业运维，全托管方式，提供可靠稳定的服务。典型案例&架构 航海船舶大数据平台 场景：全球AIS船舶实时...
概述
本示例使用LoRa气象监测设备监测气象信息，包括温度、湿度、大气压、经度、纬度等数据，并使用IoT Studio平台搭建监控大屏，展示气象监测设备上报的数据和历史数据曲线图。架构图 本示例的架构图如下：物料准备 购买LoRa网关和LoRa气象监测...
最佳实践概览
轻量应用服务器提供了部分最佳实践，包括搭建环境、搭建网站、数据传输、迁移服务器以及高可用架构等。您可以根据实际需求，参考相应文档完成服务器的搭建。搭建环境 阿里云轻量应用服务器提供了多种镜像，您可以通过应用镜像快速部署应用...
功能发布记录
通过使用自助诊断功能，帮助您快速定位系统环境和网站搭建过程中遇到的问题，例如网页空间问题、站点无法访问等问题。使用自助诊断功能 主机控制台支持自定义监控报警功能 部分Linux操作系统独享云虚拟主机为您提供了自定义设置监控报警的...
源服务器迁移至轻量应用服务器
不支持Windows系统和Linux系统相互迁移，即Windows系统只能迁移到Windows系统，Linux系统只能迁移到Linux系统。操作步骤 登录 SMC控制台。在左侧导航栏，单击 迁移源。找到目标迁移源，单击对应 操作 列下的 创建迁移任务。在 创建迁移任务...
免费试用阿里云产品
实时数仓 Hologres 查询Hologres数据 大数据开发治理平台 DataWorks 大数据AI公共数据集分析 数据可视化分析平台 Quick BI 搭建仪表板报表 AI与机器学习 人工智能平台 PAI PAI-DSW免费试用：教程指南 EAS Freetier快速免费部署AI绘画...
镜像介绍
阿里云轻量应用服务器主要提供三种镜像：应用镜像、系统镜像和自定义镜像，在创建轻量应用服务器时，您可根据实际需求，选择对应的镜像。本文为您介绍轻量应用服务器支持镜像的类型及其具体镜像名称、镜像版本等信息。镜像类型 阿里云轻量...
DataWorks交流钉钉群
DataWorks作为阿里云大数据平台操作系统，对接各种大数据计算引擎，以all in one box的方式提供专业高效、安全可靠的全域智能大数据平台，高效率完成数据全链路研发流程，建设企业数据治理体系，同时提供优质高效的交流服务，本文为您介绍...
2023年
JSON_SET 2023-10-09 新增Sugar BI连接MaxCompute 新说明 Sugar BI是百度智能云推出的敏捷 BI 和数据可视化平台，MaxCompute支持您将MaxCompute项目数据接入Sugar BI，帮助您轻松完成数据分析和数据可视化工作。本文为您介绍如何使用Sugar ...
创建集群
实时数据流（DataFlow）：是EMR平台上提供的实时计算一站式解决方案，拥有分布式、高吞吐量和高可扩展性的消息系统Kafka和基于Apache Flink官方产品Ververica提供的Flink商业内核两大组件，专注于解决实时计算端到端的各类问题，广泛应用于...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
搭建WordPress博客平台
WordPress是使用PHP语言开发的博客平台，在支持PHP和MySQL数据库的服务器上，您可以用WordPress搭建自己的网站，也可以用作内容管理系统（CMS）。本教程介绍如何在不同操作系统的ECS实例上，通过手动搭建或快速搭建WordPress网站的方法。...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
物联网数据处理分析架构参考
本文以一个企业案例介绍如何基于阿里云物联网平台的数据服务，搭建企业物联网大数据应用架构。背景信息 随着物联网应用场景的深入，企业开始挖掘设备上传的数据，用于客户端应用扩展和服务营收，用于数字化运营、风控，帮助企业高效治理，...
核心能力
数据资源平台提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
客户案例
解决方案 玩物得志基于阿里云DataWorks+MaxCompute框架搭建大数据平台，使用其核心存储、计算等组件、上层可视化及业务查询能力，在开源方案的基础上进行了二次开发。解决方案架构如下。详细案例信息，请参见 玩物得志案例。互联网社交案例...
更换操作系统（系统盘）
（条件必选）如果更换操作系统前后都是Linux系统且数据盘设置了开机自动挂载分区。则切换操作系统后，数据盘分区挂载信息会丢失，需要更新/etc/fstab 配置。具体操作，请参见 在fstab文件中配置UUID方式自动挂载数据盘。相关操作 更换操作...
更换操作系统（系统盘）
（条件必选）如果更换操作系统前后都是Linux系统且数据盘设置了开机自动挂载分区。则切换操作系统后，数据盘分区挂载信息会丢失，需要更新/etc/fstab 配置。具体操作，请参见 在fstab文件中配置UUID方式自动挂载数据盘。相关操作 更换操作...
Alibaba Cloud Linux常见问题
已知性能问题 开启内核选项CONFIG_PARAVIRT_SPINLOCK可能导致性能问题 NFS v4.x版本中可能存在的已知问题 Alibaba Cloud Linux系统中与透明大页THP相关的性能调优方法 Alibaba Cloud Linux 3系统关闭CPU漏洞修复的方法 使用问题 Alibaba ...
概述
背景信息 在大数据生态系统中，Alluxio位于数据驱动框架或应用（例如Apache Spark、Presto、TensorFlow、Apache Flink和Apache Hive等）和各种持久化存储系统（例如HDFS和阿里云OSS）之间，使得上层的计算应用可以通过统一的客户端API和...
发展历程
MaxCompute通过全国首批大数据平台稳定性认证，被证明为韧性型系统。深度参与和推动全球大数据领域标准化建设 MaxCompute代表阿里巴巴计算平台，成为国际TPC（Transaction Processing Performance Council）委员会大数据评测标准BigBench的...
产品优势
您可以快速搭建开源大数据服务，例如Hadoop、Spark、Flink、Kafka和HBase服务。稳定可靠的开源组件 100%采用社区开源组件，随开源版本升级迭代，详情请参见 版本概述。适配开源组件，避免开源组件之间的版本兼容性问题。基于开源组件，优化...
E-MapReduce本地盘实例大规模数据集测试
大数据基准测试用于公平、客观评测不同大数据产品/平台的功能和性能，对用户选择合适的大数据平台产品具有重要的参考价值，TPC-DS逐渐成为了业界公认的大数据系统测试基准。本文以阿里云E-MapReduce+D1本地盘方案模拟TPC-DS测试的演示方案...
通过DMS连接StarRocks实例
背景信息 DMS是由阿里云提供的数据库管理Web终端，为您管理Windows系统和Linux系统下的数据库。您只需在数据管理控制台上录入StarRocks实例信息，即可使用数据管理功能，例如新建数据库、新建表等。更多信息，请参见 什么是数据管理DMS。...
Linux实例如何开启Kdump服务
本文主要介绍Linux系统的ECS实例如何开启Kdump服务。说明 说明：关于Kdump服务的介绍，请参见 Kdump介绍文档。详细信息 说明 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果...
Alibaba Cloud Linux常见问题
Alibaba Cloud Linux系统的Overlayfs文件系统缺乏读权限导致操作失败，如何处理？Alibaba Cloud Linux 2 如何解决Alibaba Cloud Linux 2中polkit内存泄露问题？Alibaba Cloud Linux 2系统中systemd服务异常问题说明 如何避免因cgroup引起的...
客户案例
价值体现 从大数据平台上云整体“降本增效”的方案快速切入，迁移到大数据MaxCompute、实时计算、DataWorks后，部分任务有10倍以上的性能提升，存储从自建Hadoop 3PB降到900T，利用Flink实时数据处理能力，将宝宝树现有的场景实时化（...
常见问题
Linux系统的ECS中没有禁ping却ping不通的解决方法 当IIS搭建的网站显示“500-内部服务器错误”时如何查看真实报错信息 远程连接问题 无法远程连接Windows实例的处理方法 无法通过SSH远程登录Linux实例时的排查指引 如何查看和修改Windows...
扩容分区和文件系统（Linux）
说明 云盘和文件系统正在被使用的状态下，采用resize2fs等工具在线扩容文件系统，有可能会触发文件系统数据问题，该问题与镜像内核版本、resize2fs工具版本相关，与云盘扩容本身无关。建议您为云盘创建快照，做好数据备份。具体操作，请...
概述
使用rsync命令行工具迁移数据 支持Linux/Windows/macOS操作系统，本地Linux或macOS系统可配置crontab向云上NAS自动备份数据。上传下载后的文件元数据不变（包括属主及权限信息）。支持数据增量同步。适用大量文件上传和下载或需要频繁上传...
产品概述
什么是E-MapReduce 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理...
- 产品推荐
- 这些文档可能帮助您