7.2 GGSAパイプライン

パイプラインはSparkクラスタにデプロイされます。ログはSparkコンソールまたはコマンドラインから取得できます。https://<IP_of_Instance/sparkでSparkコンソールにログインします。README.txtファイルから取得できるユーザー名とパスワードの入力を求められます。これらの資格証明を指定すると、実行中のアプリケーションのリストが表示されます。ログを取得する「Application ID」をクリックします。

「Log」列のstderrまたはstdoutリンクをクリックします。

ローカルSparkクラスタで実行している場合は、/u01/app/spark/workフォルダに移動してログにアクセスすることもできます。ls -ltrを実行すると、アプリケーションとドライバ両方のログが表示されます。たとえば、次のスクリーンショットに示すように、ドライバ・ログに移動できます。

ドライバ・ログ

同様に、次のスクリーンショットに示すように、アプリケーション・ログすなわちパイプライン・ログに移動できます。

アプリケーション・ログすなわちパイプライン・ログ

特定のUIの問題のトラブルシューティングについては、トラブルシューティングに関する項を参照してください。