科技行者

行者学院 转型私董会 科技行者专题报道 网红大战科技行者

知识库

知识库 安全导航

至顶网存储频道大数据很简单!基于AWS的Hadoop集群配置攻略

大数据很简单!基于AWS的Hadoop集群配置攻略

  • 扫一扫
    分享文章到微信

  • 扫一扫
    关注官方公众号
    至顶头条

运行Hadoop的途径有很多,但如果你希望立马就开始、而又不想为自己搭建一个集群而烦恼的话该怎么办?你最好的选择可能是一个基于云的Hadoop集群,Amazon Web Services (AWS)上的Elastic MapReduce (EMR)也许可以让你快速地达到这个目的。

作者:ZDNet 来源:ZDNet存储频道 2013年1月17日

关键字: MapR Amazon AWS 大数据 Hadoop

  • 评论
  • 分享微博
  • 分享邮件

在本页阅读全文(共6页)

 大数据很简单!基于AWS的Hadoop集群配置攻略

欢迎来到你的集群

在成功登录之后,你应该会看到一个欢迎界面,并带有命令提示符。上面的信息会告诉你如何访问Hadoop UI,不过用户界面是以基于文本的浏览器Lynx呈现的。

大数据很简单!基于AWS的Hadoop集群配置攻略

bin文件夹

切换到bin文件夹(使用cd bin命令),并列出其内容(使用ls命令)。你会看到Hadoop、HBase、Hive和Pig已经为你安装好了。

而且这些都已经准备好运行了。检查,输入“hive”命令,你将会被置于Hive的命令行提示符中。

大数据很简单!基于AWS的Hadoop集群配置攻略

HBase提示符和“grunt”

使用“hbase shell”命令得到HBase提示符或者使用“pig”命令得到Pig提示符(称为grunt)

尽管没有在这里展示,但你还可以使用“hadoop fs”命令其执行Hadoop Distributed File System (HDFS) 操作,当然,“hadoop jar”命令可以用于运行Hadoop MapReduce任务。

大数据很简单!基于AWS的Hadoop集群配置攻略

更改终止保护

当完成之后,不要忘了终止集群中的实例,否则你将继续被收取费用。要终止这些实例,你需要先在操作菜单中选择“更改终止保护”选项。

大数据很简单!基于AWS的Hadoop集群配置攻略

禁用终止保护

现在点击“是的,禁用”按钮。

    • 评论
    • 分享微博
    • 分享邮件
    邮件订阅

    如果您非常迫切的想了解IT领域最新产品与技术信息,那么订阅至顶网技术邮件将是您的最佳途径之一。

    重磅专题
    往期文章
    最新文章