免安裝免設定的 Hadoop 開發環境 - cloudera 的 QuickStart VM

Posted WizardWu 編程網

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了免安裝免設定的 Hadoop 開發環境 - cloudera 的 QuickStart VM相关的知识,希望对你有一定的参考价值。

cloudera 的 QuickStart VM,為一種免安裝、免設定 Linux 及 Hadoop,已幫你建好 CDH 5.x、Hadoop、Eclipse 的一個虛擬機環境。下載後解壓縮,可直接以 VirtualBox、VMWare、Docker、KVM 任一虛擬機,開啟 Hadoop 2.x 執行環境,並可用內建本地模式的 Eclipse 開發工具,開發、執行 Hadoop 程式碼。

下載點 :
http://www.cloudera.com/downloads.html?productID=F6m0278Rvo

下載點 (同上) :
http://www.cloudera.com/downloads/quickstart_vms/5-5.html


虛擬機至少 4 GB 記憶體 (内存),部分功能要 8 GB 記憶體。

若為 VirtualBox,選擇「匯入應用裝置」,即可匯入下載的 .ovf 檔。

此 Hadoop 2.6.0 / CDH 5.5.0 環境,是以「偽分布模式 (Pseudo-distributed Cluster)」在運作,亦即用多個 Java 的 process,來模擬一個真實 cluster 環境中的運作。

技术分享
圖 1 已設定好的 Hadoop 2.6.0 / CDH 5.5.0 / Eclipse 環境

-------------------------------------------------------------------------------------------------------------------------

資料來源:

深入理解 Hadoop (原書第2版), Pro Apache Hadoop, 簡體中譯本
http://www.amazon.cn/%E5%9B%BE%E4%B9%A6/dp/B018LW7H6I
http://m.sanmin.com.tw/product/index/005478219
ISBN:9787111515654

以上是关于免安裝免設定的 Hadoop 開發環境 - cloudera 的 QuickStart VM的主要内容,如果未能解决你的问题,请参考以下文章

設定MacOS 終端機環境 (Homebrew/zsh/oh-my-zsh/iTerm2)

開始啟用Unity for Daydream VR

終端機的環境設定: stty, set

分佈式開發和集中式開發

問題排查:F5啟動偵錯後所提示的錯誤

rbenvfish 與 VSCode 設置之路