トップ   編集 凍結 差分 バックアップ 添付 複製 名前変更 リロード   新規 一覧 単語検索 最終更新   ヘルプ   最終更新のRSS

Win+EclipseでHadoop開発環境構築

Last-modified: 2013-08-24 (土) 02:14:21 (3892d)
Top / Win+EclipseでHadoop開発環境構築

Win+EclipseでHadoop開発環境構築

Windows+Eclipse環境でHadoopの開発環境を構築した記録です。

あっちこっちのサイトに構築手順が載ってますが、単純にEclipse上でHadoopのプログラムを動作させるだけでも結構敷居が高いと感じたので、ほんと簡略化した手順を紹介します。

本来のセットアップ方法

簡略化した手順を紹介する前に、本来の手順を簡単に紹介します。

  1. Cygwinのインストール、設定(仮想分散モードの場合はsshの設定有り)
  2. HadoopのライブラリのDL、配置

って書くと、あんまり難しくなさそうですね笑

まあ、ほかのサイトに書いてあるセットアップ手順を試して、ダメだったら本サイト参考にする方が良いかもしれません。

また、上の内容が全く分からなくとも大丈夫です。

簡略化したHadoopの開発環境の構築手順

まず、本サイトでは、Java、Eclipseのインストール手順は紹介しません。

Eclipseはここら辺からDLして使うのが便利かもしれません。

手順は大きく以下の通りです。

  1. Hadoopのダウンロード、配置
  2. 本ページに添付されているファイルのDL、配置

これだけです。非常に簡単。

Hadoopのダウンロード、配置

Hadoopは以下のサイトからダウンロードできます。

特に思いがなければ、最新版をダウンロードするのが良いと思います。

ダウンロード後、適当なディレクトリに展開し、Hadoopを動かすプロジェクトのjarファイルに登録します。

※書き途中、、、