hdfs (16)


hadoop磁盘写入选择策略

hadoop写入时,默认磁盘选择是轮询的方式。可以改用按空间大小来分配,避免某个磁盘特别满。 参数 :dfs. […]




[HADOOP-11238]hdfs namenode getGroups延迟

在namenode日志看到如下错误 2016-05-11 01:00:26,360 WARN org.apac […]




DataNode启动流程源码分析

背景 最近打算要重启DataNode,之前有试过重启过程中导致业务任务失败的情况。所以想了解DataNode什 […]




HDFS-8824 平衡数据的时候不移动小文件

Do not use small blocks for balancing the cluster https […]




hdfs complete file 超时

修改一下超时次数,具体代码在 DFSOutputStream.java private void comple […]




hdfs启动相关文章

记一次DataNode慢启动问题 :启动过程中,datanode为了获取used size,如果超过时间,可能 […]