hadoopでファイルの中身を見るには？

2年 ago
芽依, 雨夜
1 minute

Hadoopでは、ファイルの内容を見るための様々な方法があります。以下はよく使われている方法です。

  1. hadoop fsコマンドでファイルの内容を閲覧する：
hadoop fs -cat <文件路径>

例えば、Hadoopファイルシステム内にある /test/test.txt ファイルの内容を確認するために、以下のコマンドを実行できます。

hadoop fs -cat /test/test.txt
  1. hadoop fsコマンドでファイル内容を標準出力に出力する：
hadoop fs -text <文件路径>

例えば、Hadoopファイルシステム内の「/test/test.txt」の内容を標準出力に出力したい場合は、以下のコマンドを実行します。

hadoop fs -text /test/test.txt
  1. hadoop fsコマンドを利用して、ファイルをローカルファイルシステムにコピーして確認する：
hadoop fs -get <Hadoop文件路径> <本地文件路径>

たとえば、Hadoop ファイル システムの /test/test.txt ファイルをローカル ファイル システムにコピーして確認するには、次のコマンドを実行します。

hadoop fs -get /test/test.txt /tmp/test.txt
cat /tmp/test.txt
  1. HadoopのWebインターフェイスからファイルの内容を閲覧する：
bannerAds