Taiwan Hadoop Forum

台灣 Hadoop 技術討論區
現在的時間是 2018-01-23, 03:46

所有顯示的時間為 UTC + 8 小時




發表新文章 回覆主題  [ 1 篇文章 ] 
發表人 內容
 文章主題 : hive中set hive.merge.mapredfiles=true后reduce输出没有合并小文件
文章發表於 : 2013-04-26, 14:51 
離線

註冊時間: 2011-11-14, 11:30
文章: 27
在hive中运行作业前set hive.merge.mapredfiles=true;set hive.merge.size.per.task=256000000;
设置reduce的个数为10,得到的是10个小文件,小于64M,是什么情况?按我理解应该合并成几个256M文件,恳求牛人指点,谢谢


回頂端
 個人資料 E-mail  
 
顯示文章 :  排序  
發表新文章 回覆主題  [ 1 篇文章 ] 

所有顯示的時間為 UTC + 8 小時


誰在線上

正在瀏覽這個版面的使用者:沒有註冊會員 和 1 位訪客


不能 在這個版面發表主題
不能 在這個版面回覆主題
不能 在這個版面編輯您的文章
不能 在這個版面刪除您的文章
不能 在這個版面上傳附加檔案

搜尋:
前往 :  
cron
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
正體中文語系由 竹貓星球 維護製作