瀏覽代碼

Disabling mapred.job.shuffle.input.buffer.percent

rbalamohan 5 年之前
父節點
當前提交
6fa5dba116
共有 1 個文件被更改,包括 2 次插入2 次删除
  1. 2 2
      settings/init.sql

+ 2 - 2
settings/init.sql

@@ -6,8 +6,8 @@ set hive.optimize.mapjoin.mapreduce=true;
 set hive.stats.autogather=true;
 
 set mapred.reduce.parallel.copies=30;
-set mapred.job.shuffle.input.buffer.percent=0.5;
-set mapred.job.reduce.input.buffer.percent=0.2;
+-- set mapred.job.shuffle.input.buffer.percent=0.5;
+-- set mapred.job.reduce.input.buffer.percent=0.2;
 set mapred.map.child.java.opts=-server -Xmx2800m -Djava.net.preferIPv4Stack=true;
 set mapred.reduce.child.java.opts=-server -Xmx3800m -Djava.net.preferIPv4Stack=true;
 set mapreduce.map.memory.mb=3072;