46 lines
1.5 KiB
Markdown
46 lines
1.5 KiB
Markdown
|
---
|
|||
|
|
title: EMR 大数据平台
|
|||
|
|
description: EMR 提供基于云的 Hadoop、Spark 等大数据处理平台，弹性伸缩，适合大规模数据分析。
|
|||
|
|
tags:
|
|||
|
|
- 大数据
|
|||
|
|
- 数据分析
|
|||
|
|
- 弹性伸缩
|
|||
|
|
keys: emr
|
|||
|
|
published: true
|
|||
|
|
uses:
|
|||
|
|
- 大规模数据处理
|
|||
|
|
- 数据仓库
|
|||
|
|
- 机器学习数据预处理
|
|||
|
|
- 日志分析
|
|||
|
|
price: 按集群资源和使用时长计费
|
|||
|
|
priceUrl: https://aws.amazon.com/cn/emr/pricing/
|
|||
|
|
image: /images/products/emr.png
|
|||
|
|
features:
|
|||
|
|
- 支持Hadoop、Spark、HBase等多种开源框架
|
|||
|
|
- 按需自动扩缩容
|
|||
|
|
- 与S3、DynamoDB等无缝集成
|
|||
|
|
- 交互式分析环境
|
|||
|
|
updatedAt: 2024-06-15
|
|||
|
|
---
|
|||
|
|
|
|||
|
|
# EMR 大数据平台
|
|||
|
|
|
|||
|
|
Amazon EMR (Elastic MapReduce) 是一个托管的集群平台，简化了在 AWS 上运行大数据框架的过程，如 Apache Hadoop、Apache Spark、HBase、Presto 和 Flink 等，以处理和分析海量数据。
|
|||
|
|
|
|||
|
|
## 产品优势
|
|||
|
|
|
|||
|
|
- **简化运维**：消除硬件配置、集群设置、Hadoop调优等繁重工作。
|
|||
|
|
- **弹性伸缩**：可根据工作负载自动增减集群节点。
|
|||
|
|
- **成本优化**：支持Spot实例和自动扩缩以降低成本。
|
|||
|
|
- **安全可靠**：提供企业级安全和权限控制，集成AWS身份服务。
|
|||
|
|
|
|||
|
|
## 典型应用场景
|
|||
|
|
|
|||
|
|
- 大规模日志处理与分析
|
|||
|
|
- ETL数据转换和加载
|
|||
|
|
- 机器学习模型训练数据准备
|
|||
|
|
- 实时数据处理流水线
|
|||
|
|
|
|||
|
|
## 价格说明
|
|||
|
|
|
|||
|
|
EMR 按实例类型和运行时间计费，可以选择按需实例或Spot实例以节省成本，详细价格请访问 [官方定价页面](https://aws.amazon.com/cn/emr/pricing/)。
|