6.5 SparkマスターVMの作成および各VMでのSparkマスターの構成
- GGSAイメージを使用して、プライベート・リージョン・サブネット
your-private-regional-subnet
に2つのSparkマスターVMを作成します。SparkマスターVMは同じコンピュート・シェイプである必要があり、最小シェイプはVM Standard 2.1です。ノート:
後続のステップでは、これらのマスターVMのIPアドレスが必要です。これらをスペース区切りリスト(たとえば、マスターVM IPリスト
)として保存します。 - SSHを実行し、各マスターVMでスクリプト
init-spark-master.sh
を実行します。スクリプトの使用方法は次のとおりであり、スクリプトへのすべての引数はスペースで区切る必要があります。$OSA_HOME/osa-base/bin/init-spark-master.sh <MountTargetIP> < Worker VM IP List >
例:
$OSA_HOME/osa-base/bin/init-spark-master.sh 10.0.1.73 10.0.0.45 10.0.0.46 10.0.0.47
実行が成功した場合、Sparkマスター・プロセスはSparkマスターVMで実行されている必要があります。