17 April 2016

前言

听了听云计算 和 大数据相关的东西,感觉这些好高大上的东西,必须要去好好学些一下才好。

正文

学习建议,初学者下载使用 1.2.1 版本的 Hadoop,

安装 Hadoop 的环境:

  1. 下载 Hadoop
  2. 配置 环境,Java 的环境, Hadoop 的环境配置
  3. 设置 SSH key,实现免密登陆

在云服务上,创建托管的 Hadoop 集群, 需要三种服务亚马逊的服务:

  1. Elastic Compute Cloud(EC2) - 弹性计算云,弹性服务器。提供了诸多的服务 - 2006
  2. Simple Storage Services(S3) - 简单存储服务,提供简单的 Key/Value 服务,最大文件数为 5TB,元数据桶,名称唯一 - 2006
  3. Elastic MapReduce(EMR) - 支持网页控制台,命令行,API, - 2009

例子程序, word count, 输出文本遵循 Hadoop 输出文件格式。

后记

商业的本质是啥,国无双士的 韦尔奇 介绍, 团队和领导力,领导力的本质是,帮助下属成功。让团体,让公司更加具有使命感。

看视频学习的好处显而易见,可以学的快一点,从而能从整体上对某项新技术有所把握。




傲娇的使用Disqus