hadoop (57)


hadoop组映射从配置文件读取

hadoop实现类似linux系统的文件权限,需要知道某个用户是属于哪个组。系统默认是使用ShellBased […]




迁移Hadoop NameNode

版本:hadoop cdh5.4 传输文件 接收方 nc -l 19999 | tar zxvf – 发送方 […]




hadoop磁盘写入选择策略

hadoop写入时,默认磁盘选择是轮询的方式。可以改用按空间大小来分配,避免某个磁盘特别满。 参数 :dfs. […]




hadoop更换namenode注意事项

所有机器hosts都要加上新namenode 新namenode要建立好以前的用户和组 zookeeper中H […]




[HADOOP-11238]hdfs namenode getGroups延迟

在namenode日志看到如下错误 2016-05-11 01:00:26,360 WARN org.apac […]




DataNode启动流程源码分析

背景 最近打算要重启DataNode,之前有试过重启过程中导致业务任务失败的情况。所以想了解DataNode什 […]