Hadoop中DataNode多目录配置
1)DataNode可以配置成多个目录,每个目录存储的数据不一样。即:数据不是副本
2)具体配置如下
(1)在hdfs-site.xml文件中添加如下内容
dfs.datanode.data.dir
file://${hadoop.tmp.dir}/dfs/data1,file://${hadoop.tmp.dir}/dfs/data2
(2)停止集群,删除三台节点的data和logs中所有数据。
rm -rf data/ logs/
(3)格式化集群并启动。
bin/hdfs namenode –format
sbin/start-dfs.sh