소스 검색

Enable hive.optimize.sort.dynamic.partition

Enable hive.optimize.sort.dynamic.partition for partitioned load
Mostafa Mokhtar 10 년 전
부모
커밋
0c965b15bb
1개의 변경된 파일1개의 추가작업 그리고 0개의 파일을 삭제
  1. 1 0
      settings/load-partitioned.sql

+ 1 - 0
settings/load-partitioned.sql

@@ -13,6 +13,7 @@ set mapred.job.reduce.input.buffer.percent=0.0;
 set mapreduce.input.fileinputformat.split.minsizee=240000000;
 set mapreduce.input.fileinputformat.split.minsize.per.node=240000000;
 set mapreduce.input.fileinputformat.split.minsize.per.rack=240000000;
+set hive.optimize.sort.dynamic.partition=true;
 
 -- set mapred.map.child.java.opts=-server -Xmx2800m -Djava.net.preferIPv4Stack=true;
 -- set mapred.reduce.child.java.opts=-server -Xms1024m -Xmx3800m -Djava.net.preferIPv4Stack=true;