赞
踩
首先我们要知道hdfs是分布式文件系统,它是分布式的由多个服务器共同联合起来实现的,适合存储海量数据,适合一次写入、多次读取的场景。
<property>
<name>dfs.block.size</name>
<value>块大小 以字节为单位</value> //只写数值就可以
</property>
在本地网络中,两个节点被称为“彼此近邻”是什么意思?
在海量数据处理中,其主要限制因素是节点之间数据的传输速率——带宽很稀缺。
这里的想法是将两个节点间的带宽作为距离的衡量标准。
节点距离:两个节点到达最近的共同祖先的距离总和
第一种:
第一个选择客户端所在的节点,若客户端不在集群中就随机选择一个集群中的节点dn1。
第二个选择集群中的除了dn1的节点所在的机架,其他机架中随机选择一个dn2.
第三个选择dn2所在的机架,节点随机选择dn3.
第二种:
第一个副本选择和第一种相同
第二个选择dn1所在机架的随机节点dn2
第三个选择与dn1、2的机架不同的机架上的随机节点。
1.namenode
2.secondarynamenode
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。