hadoop (27)


Hive On Tez cloudera5.4

配置 tez-site.xml <configuration> <property> […]




hadoop组映射从配置文件读取

hadoop实现类似linux系统的文件权限,需要知道某个用户是属于哪个组。系统默认是使用ShellBased […]




hadoop磁盘写入选择策略

hadoop写入时,默认磁盘选择是轮询的方式。可以改用按空间大小来分配,避免某个磁盘特别满。 参数 :dfs. […]




[HADOOP-11238]hdfs namenode getGroups延迟

在namenode日志看到如下错误 2016-05-11 01:00:26,360 WARN org.apac […]




DataNode启动流程源码分析

背景 最近打算要重启DataNode,之前有试过重启过程中导致业务任务失败的情况。所以想了解DataNode什 […]




HDFS-8824 平衡数据的时候不移动小文件

Do not use small blocks for balancing the cluster https […]