Taiwan Hadoop Forum

台灣 Hadoop 技術討論區
現在的時間是 2022-08-19, 20:08

所有顯示的時間為 UTC + 8 小時




發表新文章 回覆主題  [ 2 篇文章 ] 
發表人 內容
 文章主題 : 求各位大神指點。關於eclipse運行wordcount的問題
文章發表於 : 2014-02-24, 15:38 
離線

註冊時間: 2014-02-24, 15:16
文章: 1
可以在linux環境下運行,但是eclipse運行報錯,eclipse可以連接Hadoop集群,DFS下可以看見集群的目錄,錯誤如下:
代碼:
Exception in thread "main" java.lang.IllegalArgumentException: Wrong FS: hdfs://192.168.1.2:9000/user/keyan/newout, expected: hdfs://Master.Hadoop:9000
   at org.apache.hadoop.fs.FileSystem.checkPath(FileSystem.java:310)
   at org.apache.hadoop.hdfs.DistributedFileSystem.checkPath(DistributedFileSystem.java:99)
   at org.apache.hadoop.hdfs.DistributedFileSystem.getPathName(DistributedFileSystem.java:155)
   at org.apache.hadoop.hdfs.DistributedFileSystem.getFileStatus(DistributedFileSystem.java:453)
   at org.apache.hadoop.fs.FileSystem.exists(FileSystem.java:648)
   at org.apache.hadoop.mapreduce.lib.output.FileOutputFormat.checkOutputSpecs(FileOutputFormat.java:122)
   at org.apache.hadoop.mapred.JobClient.submitJobInternal(JobClient.java:770)
   at org.apache.hadoop.mapreduce.Job.submit(Job.java:432)
   at org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:447)
   at org.apache.hadoop.examples.WordCount.main(WordCount.java:79)

路徑設置如下:
代碼:
Configuration conf = new Configuration();
    conf.set("mapred.job.tracker", "192.168.1.2:9001");
    String[] ars=new String[]{"hdfs://192.168.1.2:9000/user/keyan/input","hdfs://192.168.1.2:9000/user/keyan/newout"};
    String[] otherArgs = new GenericOptionsParser(conf, ars).getRemainingArgs();


求大神們指點啊,跪求了


回頂端
 個人資料 E-mail  
 
 文章主題 : Re: 求各位大神指點。關於eclipse運行wordcount的問題
文章發表於 : 2014-02-24, 18:17 
離線

註冊時間: 2009-11-09, 19:52
文章: 2897
kevinfox18 寫:
可以在linux環境下運行,但是eclipse運行報錯,eclipse可以連接Hadoop集群,DFS下可以看見集群的目錄,錯誤如下:
代碼:
Exception in thread "main" java.lang.IllegalArgumentException: Wrong FS: hdfs://192.168.1.2:9000/user/keyan/newout, expected: hdfs://Master.Hadoop:9000
   at org.apache.hadoop.fs.FileSystem.checkPath(FileSystem.java:310)


看起來是 DNS 名稱對應的問題,一般跟 hosts 的設定有關。

執行環境?Windows?Linux?
若為 Linux ,請貼上 /etc/hosts
若為 Windows,請修改 C:\Windows\System32\drivers\etc\hosts
參考:http://azan.ironman.tw/windows-7-vista-hosts-error/comment-page-1/

- Jazz


回頂端
 個人資料 E-mail  
 
顯示文章 :  排序  
發表新文章 回覆主題  [ 2 篇文章 ] 

所有顯示的時間為 UTC + 8 小時


誰在線上

正在瀏覽這個版面的使用者:沒有註冊會員 和 1 位訪客


不能 在這個版面發表主題
不能 在這個版面回覆主題
不能 在這個版面編輯您的文章
不能 在這個版面刪除您的文章
不能 在這個版面上傳附加檔案

搜尋:
前往 :  
cron
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
正體中文語系由 竹貓星球 維護製作