Sqoopを使用してデータをHDFSにインポートする方法は何ですか？

2年 ago
結衣, 春花
1 minute

Sqoopを使用してデータをHDFSにインポートする方法は、コマンドラインツールsqoop importを使用し、関連するパラメータを指定してデータのソースとターゲットを定義することです。

具体な手順は次の通りです：

  1. 命令ラインで以下のコマンドを実行して、Sqoopを使用してデータをHDFSにインポートするプロセスを開始します。
sqoop import --connect <数据库连接URL> --username <用户名> --password <密码> --table <表名> --target-dir <目标目录>
  1. 「<データベース接続URL>、<ユーザー名>、<パスワード>、<テーブル名>、<ターゲットディレクトリ>」を実際のデータベース接続URL、ユーザー名、パスワード、テーブル名、ターゲットディレクトリに置き換えてください。–columns はインポートする列名を指定し、–where はインポート条件を指定するための他のパラメータを使用できます。
  2. コマンドを実行すると、Sqoop はデータベースに接続し、指定されたテーブルのデータを HDFS のターゲットディレクトリにインポートします。

Sqoopコマンドを実行する前に、Sqoopの環境変数とデータベースドライバが適切に設定されていることを確認してください。また、ターゲットディレクトリがHDFSで書き込み可能であり、Sqoopの実行ノードがデータベースサーバーにアクセスできることを確認してください。

bannerAds