




版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領
文檔簡介
1、eclipse hadoop開發環境配置win7下安裝hadoop完成后,接下來就是eclipse hadoop開發環境配置了。具體的操作如下:一、在eclipse下安裝開發hadoop程序的插件安裝這個插件很簡單,haoop-0.20.2自帶一個eclipse的插件,在hadoop目錄下的 contribeclipse-pluginhadoop-0.20.2-eclipse-plugin.jar,把這個文件copy到eclipse的eclipseplugins目錄下,然后啟動eclipse就算完成安裝了。這里說明一下,haoop-0.20.2自帶的eclipse的插件只能安裝在eclipse
2、 3.3上才有反應,而在eclipse 3.7上運行hadoop程序是沒有反應的,所以要針對eclipse 3.7重新編譯插件。另外簡單的解決辦法是下載第三方編譯的eclipse插件,下載地址為:/p/hadoop-eclipse-plugin/downloads/list由于我用的是Hadoop-0.20.2,所以下載hadoop-0.20.3-dev-eclipse-plugin.jar.然后將hadoop-0.20.3-dev-eclipse-plugin.jar重命名為hadoop-0.20.2-eclipse-plugin.jar,把它cop
3、y到eclipse的eclipseplugins目錄下,然后啟動eclipse完成安裝。安裝成功之后的標志如圖:1、在左邊的 project explorer 上頭會有一個 DFS locations的標志2、在 windows - preferences里面會多一個hadoop map/reduce的選項,選中這個選項,然后右邊,把下載的hadoop根目錄選中如果能看到以上兩點說明安裝成功了。二、插件安裝后,配置連接參數插件裝完了,啟動hadoop,然后就可以建一個hadoop連接了,就相當于eclipse里配置一個 weblogic的連接。第一步,如圖所示,打開Map/Reduce Loc
4、ations 視圖,在右上角有個大象的標志點擊第二步,在點擊大象后彈出的對話框進行進行參數的添加,如下圖location name: 這個隨便填寫,我填寫的是:localhost.Map/Reduce Master 這個框里Host:就是jobtracker 所在的集群機器,這里寫localhostHort:就是jobtracker 的port,這里寫的是9001這兩個參數就是mapred-site.xml里面mapred.job.tracker里面的ip和portDFS Master 這個框里Host:就是namenode所在的集群機器,這里寫localhostPort:就是namenode
5、的port,這里寫9000這兩個參數就是core-site.xml里面里面的ip和port(Use M/R master host,這個復選框如果選上,就默認和Map/Reduce Master這個框里的host一樣,如果不選擇,就可以自己定義輸入,這里jobtracker 和namenode在一個機器上,所以是一樣的,就勾選上)user name:這個是連接hadoop的用戶名,因為我是用sony用戶安裝的hadoop,而且沒建立其他的用戶,所以就用sony。下面的不用填寫。然后點擊finish按鈕,此時,這個視圖中就有多了一條記錄。第三步,重啟eclipse并
6、重新編輯剛才建立的那個連接記錄,如圖現在我們編輯advance parameters tab頁(重啟編輯advance parameters tab頁原因:在新建連接的時候,這個advance paramters tab頁面的一些屬性會顯示不出來,顯示不出來也就沒法設置,所以必須重啟一下eclipse再進來編輯才能看到)這里大部分的屬性都已經自動填寫上了,其實就是把core-defaulte.xml、hdfs-defaulte.xml、mapred-defaulte.xml里面的一些配置屬性展示出來。因為在安裝hadoop的時候,其site系列配置文件里有改動,所以這里也要弄成一樣的設置。主要關注的有以下屬性::這個在General tab頁已經設置了mapred.job.tracker:這個在General tab頁也設置了dfs.replication:這個這里默認是3,因為我在hdfs-site.xml里面設置成了1,所以這里也要設置成1hadoop.job.ugi:剛才說看不見的那個,就是這個屬性,這里要填寫:sony,Tardis,逗號前面的是連接的hadoop的用戶,逗號后面就寫死Tardis然后點擊finish,然后就連接上了,連接上的標志如圖:DFS Locations下面會有一只大象,下面會有一個文件夾,即
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
- 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
- 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 生物醫學實驗室操作規范知識問答
- 初中詩詞欣賞:深入理解意象和寓意教學教案
- 企業外聘人員合同書
- 設備采購安裝維護合同協議書規范要求
- 高中物理電磁學考點解析
- 財務管理流程表格化展示
- 養殖基地合作經營及疫病防控責任書
- 突發環境污染事件應急響應與預防機制
- 文化產業發展對歷史文化保護的促進作用
- 公司產品合格率與不合格處理情況統計表
- 上海市社區工作者管理辦法
- 高等數學(下冊)資料期末復習試題與答案
- 四沖程內燃機 機械原理課程設計說明書
- PCB 企業生產工藝及風險點
- Grace評分表、TIMI評分、CRUSAD評分、wells評分等
- 消防安全工作臺賬-消防臺賬記錄
- 金日-冷卻塔與節能
- 中考數學《分式及分式方程》計算題(附答案)
- 用人單位用工備案花名冊
- 機械式立體停車庫綜述(培訓)課件
- 電氣化鐵路有關人員電氣安全規則
評論
0/150
提交評論