科技行者

行者学院 转型私董会 科技行者专题报道 网红大战科技行者

知识库

知识库 安全导航

至顶网存储频道大数据很简单!基于AWS的Hadoop集群配置攻略

大数据很简单!基于AWS的Hadoop集群配置攻略

  • 扫一扫
    分享文章到微信

  • 扫一扫
    关注官方公众号
    至顶头条

运行Hadoop的途径有很多,但如果你希望立马就开始、而又不想为自己搭建一个集群而烦恼的话该怎么办?你最好的选择可能是一个基于云的Hadoop集群,Amazon Web Services (AWS)上的Elastic MapReduce (EMR)也许可以让你快速地达到这个目的。

作者:ZDNet 来源:ZDNet存储频道 2013年1月17日

关键字: MapR Amazon AWS 大数据 Hadoop

  • 评论
  • 分享微博
  • 分享邮件

在本页阅读全文(共6页)

 大数据很简单!基于AWS的Hadoop集群配置攻略

配置EC2实例

在“配置EC2实例”(Configure EC2 Instances)这一屏上,你需要为主实例组和核心实例组选择一个实例类型。Amazon的“m1.large”实例类型是对EMR集群的最低要求。如果你只是出于学习的目的创建一个集群,那么这就是最低的选择,也是最明智的选择。

大数据很简单!基于AWS的Hadoop集群配置攻略

实例数量

实例类型选好之后,现在你需要选择在核心实例组和任务实例组中的实例数量。同样的,如果你只是出于学习目的创建集群的话,你要尽量少地占用资源,因此你可以把核心实例组的实例数量从默认的2个减少到只有1个。类似的操作,把任务实例组的这一项设置为0,点击“继续”。

大数据很简单!基于AWS的Hadoop集群配置攻略

高级选项

当你准备好AWS账户之后,你需要创建至少一个EC2密钥对。为你的EMR集群选择一个密钥对。没有它的话,你就不能创建一个安全的终端会话并与Hadoop交互。选择好一个密钥对之后,单击“继续”。

大数据很简单!基于AWS的Hadoop集群配置攻略

引导操作

你不需要担心引导操作,只要点击屏幕上的“继续”就行了。

大数据很简单!基于AWS的Hadoop集群配置攻略

查看

在查看一屏上,请确认你选择的实例类型、实例数量和密钥对配置是否都是正确的。如果不是,点击“返回”修改设置。在一切配置都正确之后,单击“创建工作流”。

    • 评论
    • 分享微博
    • 分享邮件
    邮件订阅

    如果您非常迫切的想了解IT领域最新产品与技术信息,那么订阅至顶网技术邮件将是您的最佳途径之一。

    重磅专题
    往期文章
    最新文章