Ubuntu に Hadoop をインストールするための手順を教えてください。

2年 ago
光, 明
1 minute

まず、Hadoopのインストール前に、必ずJava JDKがインストールされていること確認してください。以下はUbuntu上でHadoopをインストールする手順です。

  1. Hadoopの最新安定版をHadoop公式サイトよりダウンロードします。ダウンロードはこちらhttps://hadoop.apache.org/releases.html
  2. ダウンロードしたHadoop圧縮ファイルを展開：次のコマンドでダウンロードしたHadoopの圧縮ファイルを展開する
tar -xzvf hadoop-X.X.X.tar.gz

X.X.XはHadoopのバージョンだ。

  1. 環境変数の設定: ターミナルを開き、以下のコマンドで~/.bashrc ファイルを編集します:
nano ~/.bashrc

ファイルの最後に次を追記:

export HADOOP_HOME=/path/to/hadoop-X.X.X
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

/path/to/hadoop-X.X.X（お使いのHadoop解凍パスに置き換える）

ファイルを保存して閉じて、以下のコマンドを実行して変更を有効にしてください。

source ~/.bashrc
  1. Hadoopの設定: Hadoopの解凍ディレクトリのconfディレクトリへ移動し、hadoop-env.shファイルにて下記のコマンドを実行する
cd /path/to/hadoop-X.X.X/conf
nano hadoop-env.sh

以下の行を見つけ、JAVA_HOMEを設定します：

export JAVA_HOME=/path/to/java

（「/path/to/java」をあなたのJavaインストールパスに置き換えてください）

ファイルを保存して閉じる

  1. Hadoopの構成ファイルは、confディレクトリにあります。このディレクトリでは、core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xmlなど、必要に応じてカスタマイズして設定することができます。必要に応じて設定したら、ファイルを保存します。
  2. Hadoopファイルシステムのフォーマット：ターミナルで、以下のコマンドを実行してHadoopファイルシステムをフォーマットします：
hdfs namenode -format
  1. ターミナルから以下コマンドを実行して、Hadoopを起動します。
start-all.sh
  1. ブラウザで http://localhost:50070 にアクセスし、Hadoop クラスタの Web インタフェースが表示されれば、Hadoop のインストールは完了です。

Hadoop を Ubuntu にインストールするための基本的な手順を説明しました。ニーズに応じて、Hadoop の権限を設定したり、より複雑な Hadoop クラスターを構成したりといった追加設定が必要になる可能性があります。

bannerAds