hadoop干嘛的

 

1、hadoop就是支持云存储和云计算的。

 

云存储就是大数据存储，100T的数据也可以存，它利用HDFS，将文件分隔成很多个Block,存在多个服务器上。

 

云计算就是map和reduce。这里要注意，以前全是程序运行在一台机器上，然后通过网络将大数据传过来处理。而hadoop正好反过来，将程序分发到各个有数据的服务器上，因为程序很小，节省了网络传输。

 

2、hadoop应用场景：

海量日志分析

之前听楠哥说的，排版最佳位置计算

 

 

3、hadoop有几大重要组成元素：

1、HDFS

2、DataNode

3、NameNode

4、Secondary NameNode

5、JobTracker

6、TaskTracker

 

其中5和6已经被YARN取代(Yet Another Resource Negotiator)

 

 

1、完整的hadoop搭建教程，跟着做一遍，会明白很多概念的东西

参考链接：http://www.powerxing.com/install-hadoop/

 

2、很多关键技术剖析

参考链接：http://www.thebigdata.cn/Hadoop/10722.html

 

3、解释了hadoop具体应用在哪些场景

参考链接：http://blog.sina.com.cn/s/blog_687194cd01017lgu.html

 

4、hadoop已经沦为穷人的ETL

参考链接：http://www.ctocio.com/bigdata/12464.html

 

5、对TaskTracker和DataTracker进行了解释，非常好

参考链接：http://my.oschina.net/u/1464779/blog/285801