Hadoopでは、YARNジョブを同時に1つしか実行できない。

Hadoop では、YARN(Yet Another Resource Negotiator)の機能により、複数のタスクを同時に実行できます。YARN は Hadoop のリソーススケジューラーとタスク実行フレームワークとして機能し、クラスター内のリソースをさまざまなタスクに割り当てます。YARN は複数のタスクを管理およびスケジューリングし、それらをクラスター内で並列実行可能にします。

Hadoopの中でYARNジョブは1つしか動作しないと誤解があるかもしれません。以下の点をチェックするとよいでしょう。

  1. Hadoopクラスタが適切に構成されていることを確認してください。これには、適切なYARN構成とResourceManagerの起動が含まれます。
  2. タスクを送信する前に、クラスタ利用可能リソースとタスクの要求リソースを確認するなど、実行に必要な十分なリソースがあることを確認する必要があります。
  3. 実行待ちのキューに自分のジョブがあるかどうかを確認してください。他のジョブが実行中のため、一時的にリソースを取得できない可能性があります。

それでも問題が解決しない場合は、より多くの詳細とエラーメッセージを送信してください。状況をより適切に把握して、問題を解決できます。

bannerAds