HiveのMetastore、Driver、Executorなどのコンポーネントの機能や役割について述べています。
- メタストア：Hive Metastoreは、Hiveの重要な要素であり、Hiveのメタデータ情報を格納するために使用されます。メタデータ情報にはデータベース、テーブル、パーティション、列、テーブルのストレージ形式、区切り文字などが含まれています。Metastoreは通常、関係データベース（MySQL、PostgreSQLなど）と一緒に使用され、メタデータの永続的な保存とデータの持続性を確保するために役立ちます。
- DriverはHiveクエリのコントロールセンターであり、ユーザーが提出したHiveQLクエリ文を解析し、論理クエリプランを生成し、そのプランを物理的な実行プランに変換する責任があります。また、DriverはMetastoreと連携して、クエリの実行に必要なメタデータ情報を取得します。最後に、Driverは実際のクエリ実行のために物理実行プランをExecutorに提出する責任があります。
- Hive Executorは、Hiveクエリの実行エンジンであり、Driverが生成した物理実行計画を実行する役割を担います。Executorには、TaskTrackerとTaskの2つのコンポーネントが主に含まれています。TaskTrackerは、タスクを実行可能な計算ノードに配布し、Taskはデータスキャンや計算などの具体的なタスクを実行します。また、Executorは実行結果をDriverに返す責任も担っています。
総じて、Metastoreはメタデータ情報の保存を担当し、Driverはクエリプランの生成とタスクスケジューリングを担当し、Executorは実際のクエリ実行を担当しています。これらの3つのコンポーネントが協力し合うことで、Hiveのクエリ機能が実現されています。
