E-MapReduce 集群适用多种使用场景，同时支持Hadoop ecosystem和Spark能够支持的所有场景。
E-MapReduce 本质是 Hadoop 和 Spark 的集群服务，您完全可以将其使用的阿里云 ECS 主机视为自己专属的物理主机。以下示例列出了 E-MapReduce 使用的经典场景。
批量数据处理
Ad hoc 数据分析查询
海量数据在线服务
流式数据处理
- 发行版本
- 产品简介
- 产品定价
- 快速入门
- 集群管理
- 集群类型
- 数据开发
- 元数据管理
- 监控与报警
- 开发指南
- 最佳实践
- 集群管理
- 数据开发
- 通过PyFlink作业处理Kafka数据
- 通过Spark Streaming作业处理Kafka数据
- 通过Kafka Connect进行数据迁移
- Gateway节点运行Flume进行数据同步
- 使用E-MapReduce处理离线作业
- 通过Hive作业处理TableStore数据
- 使用E-MapReduce Hive关联云HBase
- 在 E-MapReduce 上使用 Sqoop 工具与数据库同步数据进行网络配置
- 通过Flink作业处理OSS数据
- E-MapReduce数据迁移方案
- 使用E-MapReduce提交Storm作业处理Kafka数据
- E-MapReduce弹性低成本离线大数据分析
- E-MapReduce本地盘实例大规模数据集测试
- 使用 E-MapReduce 采集 Kafka 客户端 Metrics 数据
- 在E-MapReduce上使用Intel Analytics Zoo进行深度学习
- 通过JDBC连接HiveServer2来访问Hive数据
- 使用 E-MapReduce 进行 MySQL Binlog 日志准实时传输
- SparkSQL自适应执行
- 自建Hadoop数据迁移到阿里云E-MapReduce
- 自建Hive数据仓库迁移到阿里云E-MapReduce
- JindoFS
- API参考
- API概览
- 调用说明
- 集群
- CreateClusterV2
- CreateClusterTemplate
- CreateClusterWithTemplate
- DeleteClusterTemplate
- DescribeClusterTemplate
- DescribeClusterV2
- DescribeEmrMainVersion
- DescribeClusterBasicInfo
- ListClusterHost
- ListClusters
- ListClusterTemplates
- ListClusterServiceQuickLink
- ListClusterHostGroup
- ListEmrAvailableConfig
- ListEmrAvailableResource
- ListEmrMainVersion
- ModifyClusterTemplate
- ModifyClusterName
- ReleaseCluster
- ResizeClusterV2
- JoinResourceGroup
- ReleaseClusterHostGroup
- 集群服务
- AddClusterService
- CreateResourcePool
- CreateResourceQueue
- DeleteResourcePool
- DeleteResourceQueue
- DescribeClusterOperationHostTaskLog
- DescribeClusterResourcePoolSchedulerType
- DescribeClusterService
- DescribeClusterServiceConfig
- DescribeClusterServiceConfigTag
- ListClusterHostComponent
- ListClusterOperation
- ListClusterOperationTask
- ListClusterOperationHost
- ListClusterInstalledService
- ListClusterOperationHostTask
- ListClusterSupportService
- ListClusterService
- ListClusterServiceComponentHealthInfo
- ListClusterServiceConfigHistory
- ListResourcePool
- ModifyClusterServiceConfig
- ModifyResourcePool
- ModifyResourcePoolSchedulerType
- ModifyResourceQueue
- RefreshClusterResourcePool
- RunClusterServiceAction
- ModifyScalingConfigItemV2
- 弹性伸缩
- 标签
- 数据开发
- CloneFlow
- CloneFlowJob
- CreateFlowCategory
- CreateFlowForWeb
- CreateFlowJob
- CreateFlowProject
- CreateFlowProjectClusterSetting
- CreateFlowProjectUser
- DeleteFlow
- DeleteFlowCategory
- DeleteFlowJob
- DeleteFlowProject
- DeleteFlowProjectClusterSetting
- DeleteFlowProjectUser
- DescribeFlow
- DescribeFlowCategory
- DescribeFlowCategoryTree
- DescribeFlowInstance
- DescribeFlowJob
- DescribeFlowNodeInstance
- DescribeFlowNodeInstanceContainerLog
- DescribeFlowNodeInstanceLauncherLog
- DescribeFlowProject
- DescribeFlowProjectClusterSetting
- KillFlowJob
- ListFlow
- ListFlowCluster
- ListFlowClusterAll
- ListFlowClusterAllHosts
- ListFlowClusterHost
- ListFlowInstance
- ListFlowJob
- ListFlowJobHistory
- ListFlowNodeInstance
- ListFlowNodeInstanceContainerStatus
- ListFlowNodeSqlResult
- ListFlowProject
- ListFlowProjectClusterSetting
- ListFlowProjectUser
- ModifyFlow
- ListFlowCategory
- ModifyFlowProjectClusterSetting
- ModifyFlowCategory
- ModifyFlowForWeb
- ModifyFlowProject
- ModifyFlowJob
- RerunFlow
- ResumeFlow
- SubmitFlow
- SubmitFlowJob
- SuspendFlow
- 数据类型
- 枚举类型
- 常用API教程
- SDK参考
- 常见问题
- 视频专区
- 相关协议
- 通用参考
全部产品
弹性计算
存储
数据库
- PolarDB MySQL 云原生数据库
- PolarDB-O 云原生数据库
- PolarDB PostgreSQL 云原生数据库
- PolarDB-X 云原生分布式数据库
- 云数据库 RDS
- 云数据库 OceanBase
- 云数据库专属集群 MyBase
- 云原生多模数据库 Lindorm
- 云数据库 Redis
- 云数据库 MongoDB
- 云数据库 HBase
- 云数据库 Cassandra
- 时序数据库 TSDB
- 图数据库 GDB
- 云数据库 Memcache
- 可信账本数据库 LedgerDB
- 云原生数仓 AnalyticDB MySQL
- 云原生数仓 AnalyticDB PostgreSQL
- 云数据库 ClickHouse
- 云原生数据湖分析 DLA
- 数据传输服务 DTS
- 数据管理 DMS
- 数据库备份 DBS
- 数据库自治服务 DAS
- 数据库网关 DG
- 数据库专家服务
- 数据库和应用迁移服务 ADAM
- HybridDB for MySQL
安全
大数据
人工智能
网络与CDN
容器与中间件
开发与运维
API与工具
物联网
企业应用与服务
- Teambition
- 企业邮箱
- 云投屏
- 机器人流程自动化RPA
- 宜搭
- 金融分布式架构 SOFAStack
- SOFAStack 微服务
- SOFAStack API 统一网关
- 云行情
- 移动开发平台mPaaS
- 工业视觉智能
- 货架商品识别与管理
- 政务钉钉
- 地址标准化
- IP地理位置库
- 云游戏平台
- 云解析 DNS
- 云虚拟主机
- 备案
- 阿里云商标服务
- 智能logo设计
- 图片服务
- 软件著作权登记
- 工商注册服务
- 代理记账
- 云 AP
- API 网关
- 邮件推送
- 云价签
- 专属钉钉解决方案
- 区块链服务 BaaS
- 可信计算服务
- 分布式数字身份
- 跨链数据连接服务
- 短信服务
- 语音服务
- 智能联络中心
- 号码隐私保护
- 号码认证服务
- 号码百科
- 云通信网络加速
- 云呼叫中心
- 云小蜜
- 智能外呼
- 智能语音导航
- 智能对话分析
- 云客服
- 智能双录质检
- Linkedmall
- 鹿班
- 智能数据助理
- 网络准入
- 金融云
- 云市场
移动研发平台EMAS-专有云
- E-MapReduce >
- 产品简介 >
- 使用场景
相关产品
-
E-MapReduce
阿里云E-MapReduce（Elastic MapReduce） 是一种大数据处理的系统解决方案。构建于阿里云云服务器ECS上，基于开源的Apache Hadoop和Apache Spark，让用户可以方便地使用Hadoop和Spark 生态系统中的其他周边系统（如Apache Hive、Apache Pig、HBase等）来分析和处理自己的数据。用户还可以通过E-MapReduce将数据非常方便的导入和导出到阿里云其他的云数据存储系统和数据库系统中，如阿里云OSS、阿里云RDS等。
-
DataWorks
新一代智慧大数据研发平台DataWorks（数据工场，原大数据开发套件）是从工作室、车间到工具集都齐备的一站式大数据工场，助力您快速完成数据集成、开发、治理、服务、质量、安全等全套数据研发工作。DataWorks + MaxCompute 在2018年获得著名分析评测机构Forrester的Cloud Data Warehouse云数据仓库世界排名第二的成绩，是唯一入选的中国产品。 DataWorks V2.0 在DataWorks V1.0的基础上新增业务流程、组件的概念，完善数据研发体系，支持双项目开发，隔离开发和生产，保证数据研发规范，减少错误代码。
-
MaxCompute
大数据计算服务(MaxCompute，原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，有效降低企业成本，并保障数据安全。 诚邀您参加阿里云MaxCompute问卷调研，问卷填写大概需要花费您5-10分钟。我们将在认真填写的用户中随机抽取100名，每名用户赠送100元MaxCompute无门槛代金券。参与地址：https://survey.aliyun.com/apps/zhiliao/boGZtw_74
以上内容是否对您有帮助？
感谢您的打分，是否有意见建议想告诉我们？
感谢您的反馈，反馈我们已经收到
文档反馈
文档反馈
在文档使用中是否遇到以下问题
更多建议
匿名提交