Hadoop学习五：Hadoop-Hdfs DataNode

Hadoop学习五：Hadoop-Hdfs DataNode

博客分类： 
• Hadoop

 

 

一.数据块

1. HDFS默认数据块大小64M。
2. 文件大于64M，将被分为若干份64M+其它M存储；文件小于64M，并不会占用整个64M大小，对于小文件，HDFS提供了几种解决方案：Hadoop Archive，Sequence file和CombineFileInputFormat，后面看源码时详解。

 

二.DataNode

1.  数据节点是真正存储数据的地方。
2. 周期性向NameNode汇报心跳，并带回NameNode要下达的指令。NameNode并不主动向DataNode发送请求。
3. DataNode可以作为服务器，接受客户端的读写请求。
4. DataNode之间会互相通信，复制数据块。