Taiwan Hadoop Forum

台灣 Hadoop 技術討論區
現在的時間是 2022-07-02, 14:03

所有顯示的時間為 UTC + 8 小時




發表新文章 回覆主題  [ 2 篇文章 ] 
發表人 內容
 文章主題 : hadoop比大小(java.lang.ArrayIndexOutOfBoundsException:1)
文章發表於 : 2013-09-17, 20:14 
離線

註冊時間: 2012-07-30, 20:39
文章: 10
請教一下各位高手這是比較數字大小得程式遇到以下問題
*hadoop版本1.0.3
error::
19:52:00 INFO mapred.JobClient: Task Id : attempt_201309131249_0016_m_000000_1, Status : FAILED
java.lang.ArrayIndexOutOfBoundsException: 1
at MaxminTest$MyMapper.map(MaxminTest.java:34)
at MaxminTest$MyMapper.map(MaxminTest.java:19)
at org.apache.hadoop.mapreduce.Mapper.run(Mapper.java:144)
at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:764)
at org.apache.hadoop.mapred.MapTask.run(MapTask.java:370)
at org.apache.hadoop.mapred.Child$4.run(Child.java:255)
at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:415)
at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1121)
at org.apache.hadoop.mapred.Child.main(Child.java:249)
確實有把test上傳到DFS上
輸入指令:bin/hadoop jar MaxminTest.jar MaxminTest
拜託各位幫忙解惑!


附加檔案:
MaxminTest.java [3.26 KiB]
被下載 310 次
檔案註釋: input檔
test.txt [46 Bytes]
被下載 318 次
回頂端
 個人資料 E-mail  
 
 文章主題 : Re: hadoop比大小(java.lang.ArrayIndexOutOfBoundsException:1)
文章發表於 : 2013-09-18, 08:49 
離線

註冊時間: 2009-11-09, 19:52
文章: 2897
jj81427tw 寫:
java.lang.ArrayIndexOutOfBoundsException: 1
at MaxminTest$MyMapper.map(MaxminTest.java:34)
at MaxminTest$MyMapper.map(MaxminTest.java:19)


錯誤:在 34 行。

請先確定 split 是否正常運作。感覺上 flows[] 只有一個內容(只有 flows[0]),所以 flows[1] 取不到值。

原因:

看過 text.txt 內容,每行只有一個數值,沒有跳格符號('\t',也就是 TAB),
既然輸入沒有跳格符號那 split("\t") 就沒有作用。

代碼:
31         protected void map(LongWritable k1, Text v1, Context context) throws     IOException ,InterruptedException {
32             //按照制表符進行分割
33             final String[] flows = v1.toString().split("\t");
34             //將文本轉數值
35             final long val = Long.parseLong(flows[1]);
36             //保存在0索引
37             tops[0] = val;
38             //排序後最大值在最後一個索引,這樣由後到前,依次?小
39             Arrays.sort(tops);
40         }


- Jazz


回頂端
 個人資料 E-mail  
 
顯示文章 :  排序  
發表新文章 回覆主題  [ 2 篇文章 ] 

所有顯示的時間為 UTC + 8 小時


誰在線上

正在瀏覽這個版面的使用者:沒有註冊會員 和 1 位訪客


不能 在這個版面發表主題
不能 在這個版面回覆主題
不能 在這個版面編輯您的文章
不能 在這個版面刪除您的文章
不能 在這個版面上傳附加檔案

搜尋:
前往 :  
cron
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
正體中文語系由 竹貓星球 維護製作