Dgraph HDFSエージェントは、DgraphとHDFS環境間のデータ・トランスポート層として機能します。
Dgraph HDFSエージェントは、2つの重要な役割を果たします。
- Dgraphへのレコードの収集に参加します。これを行うために、最初に、データ処理ワークフローから出力されたHDFSからレコードを読み取って(インポートして)から、これらのレコードをDgraphの一括ロード・インタフェースに送信します。
- Studioからのデータのエクスポートに参加します。エクスポートしたデータは、Hive表を作成するために使用できるHDFS Avroファイルとローカル・ファイルのどちらかの場合があります。