| Oracle® Big Data Applianceオーナーズ・ガイド リリース4 (4.11) E92087-03 |
|
 前 |
 次 |
この章では、Oracle Big Data Applianceのソフトウェアをインストール、再インストールおよび再構成する方法について説明します。この章の内容は次のとおりです。
注意:
Oracle Big Data Appliance構成生成ユーティリティで必要なパスワードを入力しなかった場合、ソフトウェアのインストール時に入力するように要求されます。オペレーティング・システムのrootおよびoracleユーザー、Cloudera Managerのadminユーザー、およびMySQL管理者の現在のパスワードを把握していることを確認してください。Oracle Big Data Connectorsをインストールまたは再インストールする場合、Oracle Data IntegratorのMySQLパスワードも必要です。
Mammothは、Oracle Big Data Applianceソフトウェアをインストールおよび構成するためのコマンドライン・ユーティリティです。Mammothを使用すると、次のことを実行できます。
CDHまたはOracle NoSQL Databaseのクラスタを設定できます。
複数のラックにクラスタを作成できます。
Oracle Big Data Applianceのラックに複数のクラスタを作成できます。
同じラックまたは新しいラックの新しいサーバーにクラスタを拡張できます。
新しいソフトウェアでクラスタを更新できます。
ローリング・アップグレードは、3つのレプリカのうち1つのノードを常にアクティブにするシーケンスでクラスタのノードを再起動します。これにより、クラスタは一連の再起動全体でオンラインのままになることができます。その結果、クラスタの一部の(すべてではない)サービスをアップグレード中に中断せずにアクセス可能なままにすることができます。
ローリング・アップグレードは、CDH 4.1以降を実行しているインストールでのみ使用できます。
ペアとなっているノードを順次に再起動するとプロセスの時間が長くなるため、ローリング・アップグレードは、すべてのサーバーが同時に再起動される従来のMammothアップグレードよりも長時間かかります。Mammothノードと(一度に再起動される)クリティカル・ノードごとに4分に加えて、非クリティカル・ノードのペアごとに平均8から10分を見積もってください。
ローリング・アップグレードは自動で実行できます。各サーバーのアップグレード後の再起動に成功した場合、再起動イベントは、あるサーバーから次(または次のペア)のサーバーに自動的に「ロール」します。サーバー再起動時に更新でエラーまたは警告条件が検出された場合、プロセスは一時停止し、続行するかどうかを確認するプロンプトが表示されます。
Reboot of node mnode22bda08 had errors/warnings, do you wish to proceed anyway? [y/n]:
nを入力した場合:
問題を解決できるようにアップグレードが停止します。
準備ができたら、mammoth -pを使用してインストールを再開します。
yを入力した場合:
アップグレードが続行されます。
このプロンプトは、ノード・アップグレードごとに1回表示されます。ノードがすでに再起動されている(そしてプロンプトに対してすでに回答されている)場合、プロンプトを再度表示せずにアップグレードが続行されます。
ローリング・アップグレードが可能な場合
ローリング・アップグレードは、このドキュメントで説明する次のアップグレード・タスクのオプションです。
通常、「クラスタへのサーバーの追加」では、このプロセスでクラスタ停止時間は発生しません。ただ1つの例外は、1ラック・クラスタが初めて2番目のクラスタに拡張されるケースで、クラスタ拡張のために停止時間が発生します(このときにマスターの役割が追加のラックに移されます)。ただし、その後のクラスタ拡張では停止時間は必要なくなります。
ローリング・アップグレードがオプションの場合、Mammothではコンソールに次のメッセージが表示され、インストールをローリング・アップグレードとして続行するかどうかの選択を求められます。
You can choose a rolling upgrade or continue with a conventional upgrade. Rolling upgrades need a minimum replication factor of three (this is the default in Mammoth) to have full availability during the upgrade. Do you wish to perform a Rolling Upgrade? [y/n]:
注意:
プロンプトにyと入力してローリング・アップグレードを受け入れた場合、クラスタはプロセスにコミットされ、クラスタ内のすべてのノードのアップグレードは中断なしで完了するまで続行する必要があります。 ローリング・アップグレード時のサービス可用性
ローリング・アップグレードでは、HDFS High Availability (HDFS HA)を使用するように構成されているサービスは、クラスタ内の各ノードがアップグレードされて再起動されるときに継続的に使用可能なままになります。これらには、HDFS、YARNおよびZookeeperが含まれます。これらのサービスをアップグレード中に使用可能にするには、3以上のHadoopレプリケーション係数が必要です。その理由は、ローリング・アップグレードはノードをペアで再起動するためです。グローバル構成は個々のファイルに対して上書きされている可能性があるため、アップグレードは、レプリケーション係数がこの最小値を満たすかどうかを事前に判断できません。不十分なレプリケーション係数でもアップグレードは停止されませんが、その場合、HDFS HA対応のサービスでダウンタイムが発生することがあります。
ローリング・アップグレードでは、Clouderaサービスは2つのバッチで再起動されます。これは、アップグレード中にHDFSおよびその他のサービスへのアクセスを維持するものです。HDFS HAを使用するように構成されない、または構成できないサービスは、レプリケーション係数に関係なく、ローリング・アップグレード中に使用不能になることがあります。
Oracle Enterprise Managerオプションでは、Oracle Big Data Applianceと同じネットワークのリモート・サーバーにソフトウェアが必要です。Mammothを実行する前にそれらのインストールが完了している必要があり、そうでない場合は失敗します。
同様に、キー配布センター(KDC)がリモート・サーバーにインストールされている場合には、Kerberosに対してもいくつかの手順を完了する必要があります。Oracle Big Data ApplianceにKDCをインストールする場合、事前に行う手順はありません。
次の表では、すべてのインストール・オプションの前提条件について説明します。
自動サービス・リクエストの前提条件は、次のとおりです。
My Oracle Supportアカウントが設定されている。
ASRマネージャが正常に稼働している。
Enterprise Managerの前提条件は、次のとおりです。
Oracle Management System (OMS)バージョン12.1.0.4.0以上が正常に稼働している。
OMSエージェント・プルURLが動作している。
OMS emcliダウンロードURLが動作している。
HTTPSアップロード・ポートとコンソール・ポートの両方が開いている。
リモートKDCの場合のMIT Kerberosの要件:
kadminから次のコマンドを実行し、cloudera-scm/adminをユーザーとしてKDCデータベースに追加します。
addprinc -randkey cloudera-scm/admin@<REALM NAME>
cloudera-scm/adminに、Kerberosデータベースに対するすべての権限を付与します。データベースからプリンシパルを追加、修正、削除、リストできる必要があります。
kadminから次のコマンドを実行して、cmf.keytabファイルを作成します。
xst -k cmf.keytab cloudera-scm/admin@<REALM NAME>
cmf.keytabを/opt/oracle/BDAMammothに移動します。
OozieとHueをサポートするには、リモートKDCが更新可能なチケットをサポートしていることを確認してください。サポートしていない場合には、次の手順を実行します。
kdc.confを開き、max_lifeとmax_renewable_lifeの値を設定します。max_lifeパラメータはチケットが有効な期間を定義し、max_renewable_lifeパラメータはユーザーがチケットを更新できる期間を定義します。
krbtgtプリンシパルのmaxrenewlifeを設定します。次のkadminコマンドを使用して、durationを所定の期間で置き換え、REALM NAMEをレルムの名前で置き換えます。
modprinc -maxrenewlife duration krbtgt/REALM NAME
Kerberosを構成するとき、KDCが更新可能なチケットをサポートしない場合には、OozieとHueが正常に動作しないことがあります。
リモートKDCの場合のActive Directory Kerberosの要件
Active Directory Kerberosの要件は、MOS (My Oracle Support)に記載されています。
MOSドキュメント2013585.1および2029378.1を参照してください。
Mammothバンドルには、インストール・ファイルとベース・イメージが含まれます。ソフトウェアをインストールする前に、「構成ファイルの生成」の説明に従い、Oracle Big Data Appliance構成生成ユーティリティを使用して構成ファイルを生成する必要があります。
ラック・サイズや、CDHまたはOracle NoSQL Databaseクラスタを作成しているか、または既存のクラスタをアップグレードしているかにかかわらず、この章で説明されているすべての手順に同じバンドルを使用します。
Mammothバンドルをダウンロードするには、次の手順を実行します。
My Oracle SupportまたはAutomated Release Updates (ARU)のいずれかのダウンロード・サイトを見つけます。
My Oracle Support
My Oracle Supportにログインし、『Oracle Big Data Appliance Patch Set Master Note (Doc ID 1485745.1)』を検索します。
リストが表示されたら、このリリースのMammothバンドル・ソフトウェア・バージョンのリンクをクリックします。
表から該当するMammothパッチ・バンドルへのリンクを見つけてください。
ARU
ARUに接続します。
Patchesページで、「Product」にBig Data Appliance統合ソフトウェアおよび「Release」に適切なリリース番号を設定します。
「Search」をクリックします。
BDA Mammoth ZIPファイルをクラスタの第1ノードの任意のディレクトリ(/tmpなど)にダウンロードします。ラックの構成に応じて、このノードはラックの下から数えて1番目、7番目または13番目のサーバーになる場合があります。マルチラック・クラスタの場合、このサーバーはプライマリ・ラックにあります。
パッチは、p<patch_number>_Linux-x86-64_<file number>of<total number of files>.zipのラベルのファイルのセットで構成されます
クラスタの第1ノードにrootとしてログインします。
ダウンロードしたすべてのzipファイルからすべてのファイルを解凍します。次に例を示します。
$ unzip p<patch_number>_Linux-x86-64_1of4.zip
Archive: p<patch_number>_<version>_Linux-x86-64_1of4.zip
inflating: README.txt
creating: BDAMammoth-ol6-<version>/
...
BDAMammoth-<version>ディレクトリに移動します。
# cd BDAMammoth-ol6-<version>
BDAMammoth-<version>.runからすべてのファイルを抽出します。
# ./BDAMammoth-ol6-<version>.run
Big Data Appliance Mammoth v<version> Self-extraction
Checking for and testing BDA Base Image in /tmp
BDABaseImage-<version>_RELEASE.iso: OK
Removing existing temporary files
Generating /tmp/BDAMammoth.tar
Verifying MD5 sum of /tmp/BDAMammoth.tar
/tmp/BDAMammoth.tar MD5 checksum matches
Extracting /tmp/BDAMammoth.tar to /opt/oracle/BDAMammoth
Extracting Base Image RPMs to bdarepo
Moving BDABaseImage into /opt/oracle/
Extracting BDA Extras
Removing temporary files
.
.
.
Please "cd /opt/oracle/BDAMammoth" before running "./mammoth -i <rack_name>"
#
Mammothソフトウェアの新規バージョンは/opt/oracle/BDAMammothにインストールされ、以前のバージョン(アップグレードの場合)は/opt/oracle/BDAMammoth/previous-BDAMammothに保存されます。
実行中のインストール・タイプに固有の手順に従います。
Mammothでは、Oracle Big Data Appliance構成生成ユーティリティによって生成されたファイルを使用して、Oracle Big Data Applianceにソフトウェアをインストールして構成できます。クラスタは、CDH (Hadoop)専用またはOracle NoSQL Database専用にできます。
CDHクラスタの場合、MammothによってCloudera's Distribution including Apache Hadoopのインストールと構成が行われます。これには、すべてのHadoopソフトウェアおよびCloudera Manager (Hadoopクラスタを管理するためのツール)が含まれます。ライセンスがある場合、MammothはオプションでOracle Big Data Connectorsのすべてのコンポーネントをインストールおよび構成できます。
NoSQLクラスタの場合、MammothはOracle NoSQL Databaseをインストールします。Oracle Big Data Appliance 2.2より、CDHとOracle NoSQL Databaseはクラスタを共有しません。
Mammothでは、ラック内のすべてのサーバー全体にソフトウェアをインストールする以外に、必要なユーザー・アカウントの作成、適切なサービスの開始、および適切な構成パラメータの設定を行うことができます。この完了時には、完全に機能する高度にチューニングされたHadoopクラスタを実行できます。
ソフトウェアをインストールするには、次の手順を実行します。
Oracle Big Data Applianceラックが/opt/oracle/bda/network.json (またはcluster-network.json)に記述されたカスタム・ネットワーク設定に従って構成されていることを確認します。ラックがまだ工場出荷時のデフォルトIPアドレスに構成されている場合、最初に「ネットワークの構成」の手順に従ってネットワーク構成を実行します。
ソフトウェアがまだラックにインストールされていないことを確認します。ソフトウェアがインストールされており、アップグレードする場合は、手順6でmammoth -pオプションを使用します。
Mammothバンドルをダウンロードして解凍します。クラスタの第1サーバーにrootとしてログインする必要があります。
BDAMammothディレクトリに移動します。
# cd /opt/oracle/BDAMammoth
cluster_name-config.jsonを現在のディレクトリにコピーします。
適切なオプションを使用してmammothコマンドを実行します。次のサンプル・コマンドでは、すべてのステップが実行されます。
./mammoth -i rack_name
ベース・イメージのアップグレードが行われた場合、Mammothのインストール手順3の完了後に、再起動するように要求されます。
自動サービス・リクエストのサポートをインストールした場合は、「自動サービス・リクエストのインストールの確認」の手順を実行します。
サーバー上の別のCDHクラスタを構成するには、次の手順を実行します。
注意:
Mammothは、現在の構成を/opt/oracle/bda/install/stateディレクトリに格納します。このディレクトリのファイルは削除しないでください。クラスタにラックを追加するなど、Mammothをもう一度使用する必要がある場合に、この情報が不足していると実行が失敗します。
自動サービス・リクエストのインストールの確認
My Oracle Support (http://support.oracle.com)にログインします。
ドキュメントID 2103715.1のエンジニアド・システムASR構成チェック・ツール(asrexacheckバージョン4.x)に関するドキュメントを検索し、asrexacheckスクリプトをダウンロードします。
本来、これはOracle Exadata Database Machineに対して実施するチェックですが、現在はOracle Big Data Applianceでもサポートされています。
asrexacheckをOracle Big Data Applianceクラスタのサーバーにコピーします。
rootとしてそのサーバーにログインします。
asrexacheckをクラスタ内のすべてのサーバーにコピーします。
# dcli -C -f asrexacheck -d /opt/oracle.SupportTools
ファイルのアクセス権限を変更します。
# dcli -C chmod 755 /opt/oracle.SupportTools/asrexacheck
スクリプトを実行します。
# dcli -C /opt/oracle.SupportTools/asrexacheck
Oracle Supportのリクエスト(SR)を保存してASRインストールを検証します。次の選択項目に注意してください。
「What is the Problem?」の「Hardware」タブをクリックします。
「Products Grouped By」で、「Hardware License」を選択します。
「Problem Type」で、「My - Auto Service Request (ASR) Installation and Configuration Issues」を選択します。
asrexacheckの出力を含みます。
ソフトウェア・インストール手順のステップ8を続行します。
関連項目:
dcliの詳細:
Mammothユーティリティが失敗した場合は、次の手順を実行して問題を解決します。
関連項目:
『Oracle Big Data Applianceソフトウェア・ユーザーズ・ガイド』
サーバーを既存のクラスタに追加するには、Mammothユーティリティを使用してクラスタを新しいサーバーに拡張します。この目的にはOracle Big Data Appliance構成生成ユーティリティを使用しないでください。
クラスタの各ラックで、ラックがクラスタに提供できる最小サーバー数は3です。したがって、3サーバー以上を含む1つのグループを最初に追加する必要があります。最小の数を満たせば、その他の制限はありません。この後、ラックからクラスタに1つずつサーバーを追加することも、任意の数をまとめて追加することもできます。また、ラック上のすべてのサーバーにクラスタを同時に拡張することもできます。
同じラック(および同じクラスタ)にサーバーを追加すると、そのプロセスでクラスタの停止時間は発生しません。1ラック・クラスタが初めて2番目のクラスタに拡張されるとき、クラスタ拡張のために停止時間が発生します(このときにマスターの役割が追加のラックに移されます)。ただし、その後のクラスタ拡張では停止時間は必要なくなります。
新しいノードを既存のクラスタに追加する場合、エッジ・ノードをデコミッションする必要はありません。
新しいサーバー・ノードと古いサーバー・ノードの構成方法に大きな違いはありません。ただし、新しいノードのディスク容量が大きい場合、作成されるデータ・パーティションは、ディスク全体を使用するために対応して大きくなります。データ・ノードごとに使用可能な容量が異なる状況はHDFSによって処理されます。Oracle Big Data Applianceにより特別な構成が追加で実行されることはありません。
関連項目:
クラスタの追加サーバーにソフトウェアをインストールするには、次の手順を実行します。
作業を開始する前に:
Mammoth -eオプションの説明は、「Mammothソフトウェア・インストールおよび構成ユーティリティ」を参照してください。
すべてのサーバーで同じソフトウェア・バージョンが実行されていることを確認します。追加のサーバーは、既存クラスタより新しいOracle Big Data Applianceベース・イメージを持つことはできません。
単一のHadoopクラスタを構成するすべてのラックがケーブルで接続されていることを確認します。
rootとしてプライマリ・ラックのnode01に接続し、BDAMammothディレクトリに移動します。
cd /opt/oracle/BDAMammoth
注意: Mammothは常にプライマリ・ラックから起動してください。
サーバー・グループのパラメータ・ファイルを生成します。次の例では、ノード13から数えて6つのサーバーを追加します。
./mammoth -e node13 node14 node15 node16 node17 node18
同じラックまたは複数のラックにあるサーバーを指定できます。
ベース・イメージのアップグレードが行われた場合、Mammothのインストール手順3の完了後に、再起動するように要求されます。
Oracle Enterprise Manager Cloud Controlを使用してOracle Big Data Applianceを監視している場合、再検出を実行してハードウェアおよびソフトウェアの変更を特定します。
Oracle Big Data Connectorsのライセンスを持っている場合、それらはプライマリ以外のラックのすべてのノードにインストールされます(ただし、そこではサービスは実行されません)。Oracle Data Integratorエージェントは、引き続きプライマリ・ラックのnode03で実行されます。
Mammothは、/opt/oracle/bda/install/stateに格納されたファイルから現在の構成を取得します。これらのファイルが存在しないか、サービスのいずれかが手動で移動されて他のノードで実行されていると、Mammothは失敗します。
ソフトウェア・バージョンの違いについて
1つのHadoopクラスタとして構成されたすべてのサーバーには、同じイメージが存在する必要があります。新しいOracle Big Data Applianceラックには、以前にインストールされたラックと比較して新しいベース・イメージが工場出荷時にインストールされている可能性があります。任意のサーバーでimageinfoユーティリティを使用して、イメージ・バージョンを取得してください。単一のHadoopクラスタのすべてのサーバーに同じイメージ・バージョンが存在する場合、ソフトウェアをインストールできます。
新しいサーバーをHadoopクラスタの残りと同期するには、既存のクラスタを最新のイメージ・バージョンにアップグレードするか、新しいサーバーのイメージ・バージョンをダウングレードします。
イメージ・バージョンをアップグレードするには、次の手順を実行します。
-pオプションを使用してMammothを実行し、クラスタのソフトウェアを最新バージョンにアップグレードします。「Oracle Big Data Applianceでのソフトウェアのアップグレード」を参照してください。
イメージ・バージョンをダウングレードするには、次の手順を実行します。
新しいラックのイメージを、クラスタにインストールされている古いバージョンに変更します。My Oracle Support情報センターID 1445745.2を参照してください。
既存のクラスタの第1サーバーにある古いバージョンのMammothユーティリティを使用して、クラスタを新しいラックに拡張します。
新しいサーバー・モデルを追加する場合には、ダウングレードできるのは、そのモデルで使用可能な最初のソフトウェア・バージョンまでです。たとえば、Sun Server X3-2Lサーバーを追加する場合には、Oracle Big Data Applianceソフトウェアのバージョン2.3以上をインストールする必要があります。
ソフトウェアをアップグレードする手順は、あるメジャー・リリースから別のメジャー・リリースにアップグレードする場合でも、単にパッチ・セットを適用する場合でも同じです。また、この手順は、Hadoopクラスタが1つのOracle Big Data Applianceラックで構成されていても、複数のラックで構成されていても同じです。
このプロセスによって、ファームウェア、オペレーティング・システム、Oracle Linux Unbreakable Enterprise Kernel (UEK)、CDH、JDKおよびOracle Big Data Connectors (事前にインストールされている場合)を含むソフトウェア・スタックのすべてのコンポーネントがアップグレードされます。
Oracle Big Data Connectorsのみをアップグレードして、ソフトウェア・スタックの他のコンポーネントをアップグレードしない場合は、Oracle Supportにサポートを依頼してください。
ソフトウェアのダウングレードはサポートされません。
注意:
アップグレードにより、ローリング・アップグレードを選択するか、従来のアップグレードを続行するかを確認するプロンプトが表示されます。従来のアップグレード・プロセスは、サービスを自動的に停止し、必要に応じて開始します。したがって、mammothコマンドの実行中はクラスタを使用できません。ローリング・アップグレードの利点は、アップグレード・プロセス全体を通じて一部のサービスに中断なくアクセスできることです。ただし、ローリング・アップグレードはサーバーの再起動が同時に行われないため、サーバーごとに時間が余分にかかります。
現在、Oracle Big Data Applianceソフトウェアをアップグレードしても、対応するInfiniBandまたはCiscoスイッチのアップグレードは必要ありません。
Oracle Big Data Appliance 4.11は、Oracle Linux6のみを、インストールとアップグレードの両方についてサポートしています。Oracle Linux 5はサポートされていません。Oracle Linux 7のサポートは、将来のリリースで追加されます。
次の手順に従って、Oracle Big Data Applianceクラスタのソフトウェアを現在のバージョンにアップグレードします。
Mammothユーティリティによってパスワードが求められた場合、クラスタで現在有効な次のパスワードが必要です。
oracle
root
Cloudera Manager admin
MySQL Database admin
Oracle Data IntegratorのMySQL Database (Oracle Data Integratorエージェントがインストールされている場合)
Oracle Big Data Appliance 4.1では、Apache SentryはファイルベースのプロバイダからSentryサービスへ変更されました。クラスタをアップグレードするときにファイルベースのプロバイダとしてのSentryが有効であった場合、ファイルベースのプロバイダが維持されます。Sentryサービスへ切り替えるには、ソフトウェアをアップグレードする前にSentryを無効にし、後でSentryを再び有効にします。
次のようにOracle Big Data Applianceソフトウェアを現在のソフトウェア・バージョンにアップグレードします。これはサマリーです。次の手順の詳細、既知の問題および前提条件は、My Oracle SupportのDoc ID 2101906を参照してください。
重要:
アップグレードの前にすべてのOozieジョブを停止してください。そうしないとアップグレードが失敗することがあります。アップグレードで、Spark 2はまだ存在しないクラスタに自動的にデプロイされます。
当然のことながら、Oracle Big Data Applianceソフトウェア用のOracleの個別パッチはサポートされています。 個別パッチの一環として行われないパーセルのアップグレードは、Oracleサポートの承認がないかぎり、サポートされません。
Mammothバンドルには、Cloudera's Distribution including Apache Hadoop (CDH)のパーセルの最新のバージョンが含まれています。ただし、CDHはClouderaのスケジュールに合わせてリリースされており、現在のMammothバンドルよりも新しいCDHのリリースが利用できる場合があります。新しいバージョンのCDHが、現在のOracle Big Data Applianceリリースとの統合のためにサポートされている可能性があります。疑問がある場合は、Oracleサポートに問い合せてください。
Oracle Big Data Applianceの初期構成中に、オプションのソフトウェア・コンポーネントがインストールされる場合とインストールされない場合があります。bdacliユーティリティを使用して、この決定の一部を元に戻すことができます。関係のあるサーバー名、ポート、ユーザー名およびパスワードを指定する必要があります。
この項では、再構成オプションの例をいくつか示します。次の項目があります。
注意:
構文の詳細は、「bdacli」を参照してください。
Oracle Big Data Connectorsのサポートを追加または削除できます。
Oracle Big Data Connectorsのサポートを追加するとき、Oracle Data Integratorエージェントをインストールするかどうかを選択できます。インストールする場合は、MySQL DatabaseのrootユーザーおよびOracle Data Integratorユーザー(BDA_ODI_REPO)のパスワードを指定する必要があります。Cloudera Managerの管理ユーザーのパスワードがcluster_name-config.jsonに保存されていない場合、それも把握しておく必要があります。
次の手順では、bdacliユーティリティを使用します。
Oracle Big Data Connectorsをクラスタに追加する場合:
プライマリ・ラックの第1 NameNode (node01)にrootとしてログインします。
Oracle Big Data Connectorsを有効にします。
# bdacli enable bdc INFO: Logging all actions in /opt/oracle/BDAMammoth/bdaconfig/tmp/bda1node03-20140805110007.log and traces in /opt/oracle/BDAMammoth/bdaconfig/tmp/bda1node03-20140805110007.trc INFO: This is the install of the primary rack INFO: Checking if password-less ssh is set up . . . Do you wish to enable ODI? [y/n]: y Enter password for the BDA_ODI_REPO mysql user Enter password: odi_password Enter password again: odi_password Enter password for the mysql root user Enter password: root_password Enter password again: root_password WARNING: The password for the Cloudera Manager admin user is missing from the parameters file and is required for the installation. Enter password: admin_password Enter password again: admin_password % Total % Received % Xferd Average Speed Time Time Time Current Dload Upload Total Spent Left Speed 0 2 0 2 0 0 181 0 --:--:-- --:--:-- --:--:-- 250 INFO: Creating environment.pp file ... INFO: Making sure all puppet agents can be accessed. INFO: Pinging puppet agents INFO: Adding BDC to the cluster. This will take some time ... . . . SUCCESS: Successfully reconfigured service
Oracle Big Data Connectorsのサポートを削除する場合、次のユーザーのパスワードがcluster_name-config.jsonに保存されていないときは、それらのパスワードを指定する必要があります。
Cloudera Managerのadminユーザー
MySQL Databaseのrootユーザー(Oracle Data Integratorエージェントが有効になっている場合)
MySQL DatabaseのBDA_ODI_REPOユーザー(Oracle Data Integratorエージェントが有効になっている場合)
次の手順では、bdacliユーティリティを使用します。
Oracle Big Data Connectorsをクラスタから削除する場合:
プライマリ・ラックの第1 NameNode (node01)にrootとしてログインします。
Oracle Big Data Connectorsを削除します。
# bdacli disable bdc INFO: Logging all actions in /opt/oracle/BDAMammoth/bdaconfig/tmp/bda1node03-20140805104603.log and traces in /opt/oracle/BDAMammoth/bdaconfig/tmp/bda1node03-20140805104603.trc INFO: This is the install of the primary rack INFO: Checking if password-less ssh is set up INFO: Executing checkRoot.sh on nodes /opt/oracle/BDAMammoth/bdaconfig/tmp/all_nodes #Step -1# SUCCESS: Executed checkRoot.sh on nodes /opt/oracle/BDAMammoth/bdaconfig/tmp/all_nodes #Step -1# INFO: Executing checkSSHAllNodes.sh on nodes /opt/oracle/BDAMammoth/bdaconfig/tmp/all_nodes #Step -1# SUCCESS: Executed checkSSHAllNodes.sh on nodes /opt/oracle/BDAMammoth/bdaconfig/tmp/all_nodes #Step -1# INFO: Reading component versions from /opt/oracle/BDAMammoth/bdaconfig/COMPONENTS INFO: Creating nodelist files... WARNING: The password for the Cloudera Manager admin user is missing from the parameters file and is required for the installation. Enter password: admin_password Enter password again: admin_password % Total % Received % Xferd Average Speed Time Time Time Current Dload Upload Total Spent Left Speed 0 2 0 2 0 0 184 0 --:--:-- --:--:-- --:--:-- 250 WARNING: The password for the MySQL root user is missing from the parameters file and is required for the installation. Enter password: root_password Enter password again: root_password INFO: Executing verifyMySQLPasswd.sh on nodes /opt/oracle/BDAMammoth/bdaconfig/tmp/all_nodes #Step -1# SUCCESS: Executed verifyMySQLPasswd.sh on nodes /opt/oracle/BDAMammoth/bdaconfig/tmp/all_nodes #Step -1# WARNING: The password for the MySQL BDA_ODI_REPO user is missing from the parameters file and is required for the installation. Enter password: odi_password Enter password again: odi_password INFO: Executing verifyMySQLPasswd.sh on nodes /opt/oracle/BDAMammoth/bdaconfig/tmp/all_nodes #Step -1# INFO: Creating environment.pp file ... INFO: Making sure all puppet agents can be accessed. INFO: Pinging puppet agents INFO: Removing big data connectors. This will take some time ... . . . SUCCESS: Successfully reconfigured service
自動サービス・リクエストをサポートするには、次の手順を実行します。
My Oracle Supportアカウントを設定してASRマネージャをインストールします。これは、Oracle Big Data Applianceで自動サービス・リクエストをアクティブ化する前に行います。「自動サービス・リクエストの設定」を参照してください。
自動サービス・リクエスト監視を有効にしてアセットをアクティブ化します。
# bdacli enable asr INFO: Logging all actions in /opt/oracle/BDAMammoth/bdaconfig/tmp/bda1node01-20130205075303.log and traces in /opt/oracle/BDAMammoth/bdaconfig/tmp/bda1node01-20130205075303.trc . . . Enter the value for ASR_HOST [Default: ]: asr-host.example.com Enter the value for ASR_PORT [Default: 162]: Enter the value for ASR_SERVER_USER: jdoe Please Check the values you entered for the ASR parameters ASR_HOST = asr-host.example.com ASR_PORT = 162 ASR_SERVER_USER = jdoe Are these values correct (y/n): y Enter password for user jdoe on machine asr-host.example.com Enter password: password Enter password again: password INFO: Creating environment.pp file ... INFO: Making sure all puppet agents can be accessed. INFO: Pinging puppet agents INFO: Setting up ASR on all nodes. This will take some time ... . . .
「自動サービス・リクエストのインストールの確認」の手順を完了します。
Oracle Enterprise Manager Cloud Controlプラグインのインストール
予備パッチ(選択したプラグイン・バージョンに必要な場合)をインストールします。
| Enterprise Managerシステム・モニタリング・プラグイン | Oracle Big Data Applianceのプラグインをサポートするためのパッチ前提条件 |
|---|---|
| 13.2および13.2 PG Enterprise Manager System Monitoringプラグイン。 Oracle Big Data Applianceの場合、具体的な13.2 PGバージョンは |
パッチは必要ありません。 |
| 13.1 Enterprise Managerシステム・モニタリング・プラグイン |
|
| 12.c Enterprise Managerシステム・モニタリング・プラグイン |
|
Enterprise Managerシステム・モニタリング・プラグインをインストールします。
バージョン13.1のプラグインをインストールする手順は、Oracle Enterprise Manager System Monitoring Plug-inインストレーション・ガイドfor Oracle Big Data Applianceを参照してください。バージョン13.2および13.2 PGをインストールする場合も、これらと同じ手順を使用できます。
12.cプラグインのインストール手順の詳細は、My Oracle Supportのドキュメント(Download/Deployment of the 12c EM May Bundle Patch to Support Discovery/Monitoring of Cloudera Manager Admin Console HTTPS URLS (Doc ID 2148611.1))を参照してください。
13.2 PG for Oracle Big Data Applianceの新機能
13.2 PGプラグインfor Oracle Big Data Applianceでは、次のターゲットのサポートが追加されました。
Kafka
Sentry
Sqoop2
キー管理サービス
キー・トラスティ・サービス
クラスタ・セキュリティ
関連項目:
Oracle Big Data Applianceリリースの相互参照および互換性のあるOracle Enterprise Managerプラグインについては、My Oracle Supportの次のノートを参照してください。
『Oracle Enterprise Manager Cloud Control Big Data Applianceプラグイン互換性マトリクス(BDA V4.5以上)』(Doc ID 2267589.1)注意:
Active Directory Kerberosを有効にすることを選択した場合は、最初にMOS (My Oracle Support)ドキュメント2029378.1および2013585.1を読みます。これらのドキュメントでは、必要な準備手順について説明し、既知の問題に関する重要情報を提供しています。Kerberos認証をサポートするには、次の手順を実行します。
「インストールの前提条件」にリストされているKerberosの前提条件が完全に満たされていることを確認します。
プライマリ・ラックの第1 NameNode (node01)にログインします。
Kerberosを構成します。
# bdacli enable kerberos INFO: Logging all actions in /opt/oracle/BDAMammoth/bdaconfig/tmp/bda1node01-20131104072502.log and traces in /opt/oracle/BDAMammoth/bdaconfig/tmp/bda1node01-20131104072502.trc . . . INFO: Executing checkRoot.sh on nodes /opt/oracle/BDAMammoth/bdaconfig/tmp/all_nodes #Step -1# SUCCESS: Executed checkRoot.sh on nodes /opt/oracle/BDAMammoth/bdaconfig/tmp/all_nodes #Step -1# SUCCESS: Password-less root SSH is setup. Do you want to setup KDC on a BDA node (yes/no): yes Please enter the realm name: EXAMPLE.COM Enter password for Kerberos database: password Enter password again: password INFO: Executing changekrb5_kdc.sh on nodes bda1node01 #Step -1# SUCCESS: Executed changekrb5_kdc.sh on nodes bda1node01 #Step -1# SUCCESS: Successfully set the Kerberos configuration on the KDC INFO: Setting up Master KDC INFO: Executing setupKDC.sh on nodes bda1node01 #Step -1# . . .
Oracle Big Data Discoveryは、Big Dataのビジュアル分析用のエンドツーエンド製品です。Oracle Big Data Discovery 1.5または1.4 (1.4.0.37.1388以上)をOracle Big Data Appliance (この製品のライセンスがある場合)にインストールできます。
1.4リリースについては、Oracle Software Delivery Cloud (https://edelivery.oracle.com)に、Oracle Big Data Discovery 1.4.0.0.0がダウンロード可能と表示される場合があります。これは実際にはバージョン1.4.0.37.1388以上です。1.4.0.37.1388より前のリリースは、Oracle Big Data Applianceのこのリリースではサポートされていません。
注意:
現在のOracle Big Data Applianceリリースにアップグレードする前にOracle Big Data Discovery 1.4.0.37.1388以上がすでに有効になっていた場合は、アップグレード後にOracle Big Data Discoveryに必要ないくつかのクライアント・ライブラリを更新する必要があります。手順の詳細は、My Oracle Support (https://support.oracle.com)のドキュメント2215083.1を参照してください。この手動更新は、現在のOracle Big Data Applianceリリースをインストールした後にOracle Big Data Discoveryをインストールした場合は必要ありません。
以前のリリースのOracle Big Data Discoveryは、このOracle Big Data Applianceリリースではサポートされません。
このドキュメントで説明している方法は、Oracle Big Data ApplianceでOracle Big Data Discoveryをインストールおよびアンインストールするためにのみ使用します。『Oracle Big Data Discoveryインストレーション・ガイド』で説明しているインストール手順は、このコンテキストでは使用しないでください。Oracle Big Data Applianceでは、CDHクラスタ上の別々のノードへのWebLogic Server、StudioおよびDgraphのインストールはサポートされません。
エッジ・ノードにBig Data Discoveryをインストールしている場合、Oracle Big Data Discovery用のOracle Big Data Applianceのインストール手順は適用されません。エッジ・ノードの場合は、Oracle Big Data Discoveryインストレーション・ガイドで説明されている通常のインストール手順に従う必要があります。
すべてのOracle Big Data Discovery (BDD)コンポーネントは単一ノードにインストールされます。Oracle Big Data Discoveryは、クラスタの5番目のノードにインストールされます(ここでは「ノード5」と呼びます)。BDDを有効化すると、クラスタは残りのノードを構成します。たとえば、スタータ・ラックのノード1、2、3、4、6です。 必要に応じて、Oracle Big Data Discoveryを無効化してノード5をCDHクラスタに戻すこともできます。Hadoopクラスタの1ノードを専用にする余裕がない場合は、Oracle Big Data Appliance外部のサーバーにこのソフトウェアをインストールして、データ処理のためにOracle Big Data Applianceクラスタを使用できます。その場合、この項の手順は使用しないでください。かわりに、その他のインストール・オプションは、Oracle Help CenterにあるOracle Big Data Discovery製品のドキュメントを参照してください。
制限:
このインストールはOracle Linux 5を実行するOracle Big Data Applianceシステムではサポートされません。ノード5をBig Data Discoveryで再利用するために、サーバーのドライブ・アレイに現在存在するデータがインストールによってすべて削除されます。最初に、必要なディスク容量がクラスタ内の他の場所に存在することを確認します。この要件が満たされる場合、サーバー上のすべてのHadoopブロックを他のノードに再配分します。Hadoopデータは何も失われません。インストールでは、サーバー上のDataNodeおよびNodeManagerがプロビジョニング解除され、データ・パーティション(/u03から/u12)が消去されます。/boot、root (/)および最初の2つのデータ・パーティション(/u01および/u02)のみがそのまま残されます。
重要:
Oracle Big Data Discoveryをインストールする前に保存する必要のある非Hadoopデータをバックアップまたは移動するのはお客様の責任です。インストールでは、ノード5に格納されているいかなる非Hadoopデータも移動されません。ノード5のデータ・パーティション/u03-/u12に存在する非Hadoopデータは、インストールがこれらのデータ・パーティションを消去したときに失われます。Oracle Big Data Applianceのこのリリースでは、Oracle Big Data Discovery 1.5および1.4 (1.4.0.37.1388以上)がサポートされます。
バージョン1.5または1.4のOracle Big Data DiscoveryはOracle Software Delivery Cloudからダウンロードできます。バージョン1.4については、使用可能なパッケージは実際には1.4.0.37.1388以上であり、このリリースのOracle Big Data Applianceと互換性があります。
Oracle Big Data DiscoveryをOracle Big Data Applianceにインストールするには、My Oracle Supportのサポート・ドキュメント2150755.1 – How to Enable/Disable Oracle Big Data Discovery 1.2.2 on Oracle Big Data Appliance V4.5/CDH5.7.1/OL6 with bdacliで説明されている手順に従ってください。これらの手順はOracle Big Data Appliance 4.5へのインストール用ですが、現在のOracle Big Data ApplianceリリースへのOracle Big Data Discovery 1.5または1.4のインストールにも応用できます。ただし、これらの手順を次のように変更する必要があります。
CDHをアップグレードする手順は無視してください。このリリースのOracle Big Data Applianceでは廃止されています。
パッケージ・ダウンロードの前提条件の項で、バージョン1.4または1.5を選択します。
BDDの有効化の項のステップ2では、バージョン1.2.2のダウンロード・パッケージをコピーしてファイル名を変更する方法について説明しています。これは無視してください。Oracle Software Delivery Cloudのパッケージ・ダウンロードに、ファイルのリストが表示されます。ファイル名とそれぞれの説明を書き留めてください。ダウンロード後に次のようにファイル名を変更します。
| ファイルの説明 | ファイル名を変更してコピーする先... |
|---|---|
Oracle Big Data Discoveryバイナリの2つの部分の1番目 |
/opt/oracle/bdd/bdd1.zip |
Oracle Big Data Discoveryバイナリの2つの部分の2番目 |
/opt/oracle/bdd/bdd2.zip |
Oracle Big Data Discoveryのインストーラ |
/opt/oracle/bdd/installer.zip |
Oracle Fusion Middleware WebLogic ServerおよびCoherence |
/opt/oracle/bdd/ (名前変更なし) |
前述のJARファイルをWebLogic ServerおよびCoherence zipファイルから解凍します。
My Oracle Supportのノートに記載されている残りの手順に従います。
重要: Oracle Big Data Discoveryのアップグレード:
既存のOracle Big Data Discoveryのインストール環境をアップグレードするために、ここまたはMy Oracle Supportのドキュメント(2150755.1)で説明しているインストール手順を使用しないでください。Oracle Big Data Discoveryアップグレード・ガイドのアップグレード手順に従います。ソフトウェアの使用手順は、Oracle Help CenterのOracle Big Data Discoveryに関するドキュメントを参照してください。このサイトには、Oracle Big Data Discoveryの削除、再インストール、アップグレードまたは再構成の手順が含まれています。これらは、Oracle Big Data Applianceにこのソフトウェアをインストールした状態で使用すべきでないことに注意してください。 これについて疑問がある場合はOracleサポートに問い合せてください。
Oracle Big Data SQLでは、Apache Hive、HDFS、Oracle NoSQL Database、Apache HBase、その他のNoSQLデータベースなど、複数のビッグ・データ・ソースに格納された非リレーショナル・データに対する問合せをサポートしています。これにより、分散データに対して統一した問合せが可能になり、異なる製品のデータ・ストアのデータがすべてOracleデータベースに格納されているかのようにシームレスに表示および分析できるようになります。
Oracle Big Data SQLはOracle Big Data Applianceインストール・バンドルに含まれています。別途ダウンロードする必要はありません。
関連項目:
この項は、Oracle Big Data Applianceのユーザーに対するOracle Big Data SQLインストールの概要です。Oracle Big Data SQLのインストール、構成および使用の完全な情報は、これらのドキュメントを参照してください。Oracle Big Data SQLインストレーション・ガイド
Oracle Big Data SQLユーザーズ・ガイド
注意:
Oracle Big Data SQLをOracle Big Data Applianceにインストールするにはライセンスが必要です。インストールのOracle Database側の追加ライセンスは必要ありません。ライセンス要件の詳細は、Oracle Big Data Applianceライセンス情報ユーザー・マニュアルを参照してください。
Oracle Databaseへのサポートされる接続
Oracle Exadata Database Machine
Oracle LinuxまたはRHELベースのコモディティ・サーバー上のOracle Database。特定のシステムはOracle Big Data SQL Master Compatibility Matrix (My Oracle SupportのDoc ID 2119369.1)にリストされています
Oracle Big Data SQLは、単一ノードのOracle Databaseとマルチノードのデータベース(Oracle RACなど)の両方に接続できます。
次のサポートの詳細は、互換性マトリクスを参照してください。
Oracleエンジニアド・システム。
その他のシステム。
Linux OSのディストリビューションとバージョン。
Hadoopディストリビューション。
必要とされるパッチを含むOracle Databaseのリリース。
ネットワーク要件
Oracle Big Data ApplianceおよびOracle Databaseシステムは、イーサネットまたはインフィニバンドによってともにネットワーク接続される必要があります。(Oracle SuperClusterへの接続はインフィニバンドのみです)。Oracle DatabaseとOracle Big Data Applianceの間のイーサネット接続には、10 Gb/sイーサネットをお薦めします。
インストールのフェーズ
インストールはどの場合も2つのフェーズで構成され、3番目が含まれる場合があります。
Oracle Big Data Applianceでのインストール。
Oracle Big Data Appliance構成生成ユーティリティによって、Oracle Big Data SQLをインストールに含めるようにMammothに指示するフォーム・フィールドが提供されます。
Mammothのインストール後、任意のときにbdacliユーティリティを使用してOracle Big Data SQLを有効にすることもできます。
Oracle Databaseシステムでのインストール。
インストールのこの部分は手動で実行する必要があります。データベース側のインストール・バンドルは、Oracle Big Data Applianceインストールを実行すると生成されます。このバンドルをOracle Databaseシステムの各コンピュート・ノードにコピーし、解凍してインストールする必要があります。
オプションのセキュリティ機能およびユーザー・アクセス機能(デフォルトのインストールに含まれない)の有効化
Oracle Big Data Applianceインストールをカスタマイズして、Oracle Big Data Applianceのデフォルトのインストールでは構成できない機能(データベース所有者以外のユーザーがアプライアンスのHadoopクラスタのデータに対してOracle Big Data SQL問合せを実行できるマルチユーザー認可など)を含めることができできます。(デフォルトで有効化されているデータベース認証と同様に)この機能のアクティブ化を完了するには、インストール・プロセスの3番目の手順が必要です。
関連項目:
データベース側バンドルのインストールおよびオプション機能の有効化の方法の詳細は、Oracle Big Data SQLインストレーション・ガイドに説明されています。既存のOracle Big Data SQLインストールへのインストール
ソフトウェアの前のバージョンをアンインストールする必要はありません。インストールによって、以前インストールされたバージョンが現在のリリース・レベルにアップグレードされます。
注意:
以前のOracle Big Data SQLがすでにOracle Big Data Applianceに存在する場合、構成生成ユーティリティのフォーム・フィールドでインストールにOracle Big Data SQLを選択したかどうかに関係なく、Mammothインストーラはこのインストールを現在のリリース・レベルにアップグレードします。Oracle Big Data Applianceで、ソフトウェアは構成管理サーバー(Cloudera Configuration Managerが実行されているノード)の/opt/oracle/BDSJaguarにインストールされます。
Kerberos保護環境に対するチケット更新の自動設定
環境がKerberosで保護されている場合、インストールはoracleアカウント・プリンシパルのチケットを1日に4回更新するcronジョブを自動的に設定します。この頻度は、AD Kerberos要件を満たすためのものです。余分のkinitはMIT Kerberosに無害です。必要に応じて、Oracle Big Data ApplianceとOracle Databaseシステムの両方に対して自動化が設定されます。
Oracle Big Data SQLは、Mammothまたはbdacliユーティリティでインストールできます。以前のリリースは、Oracle Big Data Appliance側で自動的にアップグレードされます。
注意:
Oracle Big Data Appliance 4.11では、Oracle Big Data SQL 3.2をインストールするためにパッチ27077322は必要ありません。このパッチは、Oracle Big Data Appliance 4.10でのみ必要でした。これが初回のインストールの場合(前のリリースがインストールされていない)
ソフトウェアをインストールするようにMammothに指示:
Oracle Big Data SQLをOracle Big Data Appliance構成生成ユーティリティで選択することによってMammothインストールに含めることができます。ソフトウェアをインストールする各クラスタに対して選択する必要があります。
次の図に示すように、構成生成ユーティリティの「Cluster Definition」ページでOracle Big Data SQLインストールを設定します。
図10-1 構成生成ユーティリティのOracle Big Data SQLフィールド
ライセンスの問いに対して「Yes」を選択すると、他のオプションに進めます。「Install Big Data SQL?」に対しても「Yes」を選択します
Oracle Big Data Applianceがイーサネットまたはインフィニバンド接続によってOracle Databaseシステムに接続されるかどうかを指定します。どちらの方法もサポートされます。
構成ファイルを生成すると、Oracle Big Data SQLインストールを実行する指示が<cluster name>-config.jsonファイルに追加されます。
bdacliを使用したMammoth後インストールの実行:
# bdacli enable big_data_sql
Mammothおよびbdacliはどちらも、選択したクラスタのすべてのDataNodeにOracle Big Data SQLをインストールします。
注意:
Oracle Big Data SQLインストレーション・ガイドで説明されているデータベース認証機能を利用するには、GUID/鍵のペアを生成してインストールする必要があります。このプロセスは、鍵を生成するためにCloudera Configuration Managerがインストールされているノードで次のコマンドを実行することによって開始します。# ./jaguar --requestdb <database name> databasereq
この後、Oracle Big Data SQLのデータベース側のインストールを実行する前に、その鍵を含むファイルをOracle Databaseサーバーにコピーします。データベース認証の有効化プロセスを完了するには、他にいくつかの手順があります。鍵ファイルを生成するために使用されるJaguarユーティリティと、鍵の生成およびインストールのプロセスについては、Oracle Big Data SQLインストレーション・ガイドのHadoop側のOracle Big Data SQLのインストールまたはアップグレードを一読してください。
以前のリリースのOracle Big Data SQLがすでにインストールされている場合
この場合、構成生成ユーティリティでOracle Big Data SQLを選択する必要はありません。Mammothは、以前のOracle Big Data SQLのリリースを、現在インストールされているすべてのクラスタで現在のバージョンに自動的にアップグレードします。
注意:
インストールのOracle Database側のアップグレードは自動ではありません。このガイドの説明に従って、ソフトウェアのデータベース側をインストールしてください。MammothまたはbdacliでOracle Big Data SQLをインストールし、(カスタマイズは行わずに)これらの両方のユーティリティが生成する基本的なデータベース側インストール・バンドルをインストールした場合、Oracle Big Data SQLユーザーズ・ガイドで説明されているすべての機能にアクセスできます。ただし、この初期インストールを再構成して次の変更を行うことができます。
マルチユーザー認可の追加。
以前のリリースのOracle Big Data SQLでは、HadoopおよびHiveデータに対するすべての問合せはoracleユーザーとして実行され、ユーザーを変更するオプションはありません。すべての場合でoracleは引き続き基礎となるユーザーですが、Oracle Big Data SQLでは、Hadoop Secure Impersonationを使用して他の指定されたユーザーのかわりにoracleアカウントにタスクを実行するように指示できるようになりました。これによって、oracleユーザーのみではなく、現在問合せを実行しているユーザーに基づくHDFSデータ・アクセスが可能になりました。
Oracle Big Data SQLによって使用されるネットワークの切替え。
Oracle Big Data SQLをサポートする物理接続がある場合、Oracle Big Data SQLを再インストールしなくても、Oracle Big Data ApplianceおよびOracle Databaseサーバーをイーサネットからインフィニバンド(またはその逆)に切り替えることができます。
これらの変更を元に戻す場合は、後でインストールをもう一度再構成できます。
構成でデータベース認証はデフォルトで有効化されますが、この機能を使用する場合は、認証の基礎であるGUID/鍵のペアを生成およびインストールするプロセスを実行する必要があります。
Jaguarユーティリティを使用したインストールの再構成
Oracle Big Data SQLでJaguarユーティリティを使用して、デフォルトのインストールを再構成します。Jaguarは、インストールの構成可能パラメータを設定するJSONファイルを読み取ります。デフォルトの構成ファイルはbds-config.jsonですが、任意の名前を使用できます。カスタム構成を開始するお薦めの方法は、Mammothによって作成されたデフォルトのbds-config.jsonのコピーを作成し、このファイルにカスタマイズを追加することです。
jaguar reconfigureを実行すると、構成ファイルに設定したパラメータが操作によって読み取られ、インストールのOracle Big Data Appliance側がそれに応じて変更され、また、加えた機能変更をサポートする新しいデータベース側のインストール・バンドルが生成されます。
注意:
Jaguarは、インストールおよびアンインストールを含む多くの様々な操作を提供します。ただし、Oracle Big Data ApplianceにバンドルされているバージョンのOracle Big Data SQLをインストールした場合は、Jaguarのインストールおよびアンインストール操作を実行しないでください。構成生成ユーティリティまたはbdacliを使用して、ソフトウェアを有効化または無効化してください。
関連項目:
Oracle Big Data SQLインストレーション・ガイドのJaguarユーティリティについて
同じくOracle Big Data SQLインストレーション・ガイドのJaguar構成パラメータおよびコマンド・リファレンス
重要:
カスタム構成ファイルを作成して使用する場合、ファイルのバックアップを作成して安全な場所に格納するようにしてください。ファイルは構成のレコードであり、構成を再作成するために必要になる場合があります。誤って削除したりユーザーによって変更されることを防ぐためだけではありません。特定のMammothおよびbdacliプロセスでは、構成管理サーバー(構成マネージャが実行されるノード)のOracle Big Data SQLインストール・ディレクトリ/opt/oracle/BDSJaguarが削除または上書きされます。 Mammoth拡張(# mammoth -e)またはMammothアップグレード(# mammoth -p)では、Oracle Big Data SQLインストール・ディレクトリが削除されます。
再プロビジョニング(# bdacli admin-cluster reprovision <node name>)では、ディレクトリの削除を求められます。
# bdacli installの再実行では、カスタム構成がデフォルト構成で上書きされます。
Oracle Big Data ApplianceにOracle Big Data SQLをインストールすると、このプロセスによってデータベース側のインストール・バンドルも生成されます。Oracle Big Data ApplianceのHadoopデータに対してOracle Big Data SQL問合せを実行する予定のデータベース・システムに、このバンドルをインストールします。
Oracle Big Data Applianceでのインストールが完了した後、構成管理サーバー(Cloudera Configuration Managerが実行されているOracle Big Data Applianceノード)にrootとしてログオンします。
/opt/oracle/BDSJaguar/db-bundlesに移動します。
このディレクトリのインストール・バンドルは、次のようにクラスタ名および作成タイムスタンプを含むZIPファイルです。
bds-3.2.0-db-<cluster name>-<yymmdd.hhmi>.zip
Oracle Databaseシステムにこのバンドルをインストールするには、Oracle Big Data SQLインストレーション・ガイドのOracle Big Data SQLのOracle Database側のインストールまたはアップグレードの手順に従います。
ヒント:
前の項で説明したように、データベース側のバンドルをインストールする前にインストールをカスタマイズするために、Jaguarreconfigure操作を使用するオプションがあります。 Oracle Big Data SQLをアプライアンスにインストールすると、そのbd_cellサービスがインストールされ、HadoopクラスタのすべてのDataNodeで開始されます。
Oracle Big Data Applianceのbdacliユーティリティは、各DataNodeおよびクラスタ全体でOracle Big Data SQLサービスを管理する操作を提供します。
単一のDataNodeでのサービスのインスタンスの場合:
bdacli {start | stop | restart | status} big_data_sql_server <node name>
クラスタ内のすべてのインスタンスの場合:
bdacli {start | stop | restart | status} big_data_sql_cluster
注意:
bdacliユーティリティは、クラスタ全体でサービスをインストールまたはアンインストールするための# bdacli {enable | disable} big_data_sqlも提供します。デフォルト以外の構成パラメータを追加してインストールをカスタマイズした場合、これらのコマンドによってカスタム構成がデフォルトの構成で上書きされることに注意してください。これらを使用する場合、Jaguar再構成操作を使用してカスタマイズをリストアできるように、最初にカスタム構成ファイルのコピーをアーカイブしてください。
関連項目:
このガイドのbdacliリファレンスに、Oracle Big Data SQLおよび他のサービスの管理に使用できるbdacli操作を説明しています。Oracle Big Data SQLを完全にアンインストールするには、Oracle Big Data ApplianceとOracle Databaseシステムの両方からソフトウェアを削除します。
Oracle Databaseシステムからのアンインストール
Oracle Big Data SQLのデータベース側をインストール/アンインストールするには、bds-database-install.shスクリプト・ユーティリティを使用します。
--uninstallパラメータを指定してbds-database-install.shを実行します。 $ /bds-database-install.sh --uninstall --crs=false
注意:
データベース・ノードでGridが実行されていない場合、またはデータベースでGrid (CRS/ASM)を使用しない場合は、オプションの--crsパラメータを含めてfalseに設定します。
--uninstall-as-primaryおよび--uninstall-as-secondaryパラメータがこのリリースでは非推奨になったことに注意してください。アンインストール・プロセスでプライマリ・クラスタとセカンダリ・クラスタを区別する必要がなくなりました。Oracle Big Data Applianceからのアンインストール
bdacliを使用して、Oracle Big Data ApplianceのOracle Big Data SQLを無効化(アンインストール)します。
# bdacli disable big_data_sqlこのコマンドによって、クラスタ全体のすべてのDataNodeからソフトウェアがアンインストールされます。
Oracle Big Data Applianceには、「Oracle Big Data Appliance管理ソフトウェア」の説明どおり、オペレーティング・システムおよび様々なユーティリティが工場出荷時にインストールされています。たとえば、Oracle Big Data Applianceを元の状態に戻す場合、または障害サーバーを交換した場合、このベース・イメージの再インストールが必要になる場合があります。Mammothでは、Oracle Big Data Applianceソフトウェアを新しいバージョンにアップグレードする前に、必要に応じてベース・イメージが自動的にアップグレードされます。
ラックのすべてまたは一部のイメージを変更できます。ただし、クラスタ内のすべてのサーバーは同じイメージである必要があります。適切な手順を実行します。
注意:
ベース・イメージ・バージョンが4.5.0-6より前の場合、イメージ変更の前に、ベース・イメージをBDA v4.5.0-6に更新するためにパッチ23241894を適用することをお薦めします。パッチの詳細は、My Oracle Supportのドキュメント2135358.1を参照してください。この手順を実行して単一のサーバーのイメージを変更します。たとえば、次のように障害サーバーを交換する場合を見てみます。
注意:
サーバーのイメージを変更すると、すべてのファイルとデータが消去されます。
単一のサーバーにベース・イメージを再インストールするには、次の手順を実行します。
My Oracle SupportまたはOracle Automated Release Updates (ARU)からベース・イメージ・パッチをダウンロードして、イメージを変更するサーバーにコピーします。
注意:
ベース・イメージの最新のバージョン4.xを使用します。Mammothバンドルに含まれているバージョンは使用しないでください。
「Mammothソフトウェア・デプロイメント・バンドルのダウンロード」を参照してください。My Oracle Supportから基本イメージ・パッチをダウンロードするのと同じ基本手順を使用できます。
現在のカスタマ設定のイメージをサーバーに再適用するには、意図したネットワーク構成が/opt/oracle/bda/rack-network.jsonおよび/opt/oracle/bda/cluster-network.jsonに反映されていることを確認します。反映されていない場合は、Oracle Big Data Appliance構成生成ユーティリティを使用して新しいファイルのセットを生成します。「構成ファイルの生成」を参照してください。
/opt/oracle/bda/network.jsonの使用はまだサポートされていますが、推奨していません。)パーティションに4GB以上の空きディスク領域があることを確認します。
$ df -h
Filesystem Size Used Avail Use% Mounted on
/dev/md2 161G 23G 130G 15% /
/dev/md0 194M 40M 145M 22% /boot
tmpfs 24G 0 24G 0% /dev/shm
/dev/sda4 1.7T 197M 1.7T 1% /u01
/dev/sdb4 1.7T 197M 1.7T 1% /u02
/dev/sdc1 1.8T 199M 1.8T 1% /u03
/dev/sdd1 1.8T 199M 1.8T 1% /u04
.
.
.
ダウンロードしたベース・イメージのZIPファイルを解凍します。次の例は、コマンドラインへの出力の一部を示しています。
# unzip p<number>_<version>_Linux-x86-64.zip Archive: p<number>_Linux-x86-64.zip creating: BDABaseImage-ol6-<version>_RELEASE/ creating: BDABaseImage-ol6-<version>_RELEASE/Extras/ creating: BDABaseImage-ol6-<version>_RELEASE/Extras/BALANCER/ extracting: BDABaseImage-ol6-<version>_RELEASE/Extras/BALANCER/orabalancer-<version>-h2.zip inflating: BDABaseImage-ol6-<version>_RELEASE/Extras/BALANCER/orabalancer-<version>-h2.noarch.rpm extracting: BDABaseImage-ol6-<version>_RELEASE/Extras/BALANCER/orabalancerdemo-<version>-h2.zip creating: BDABaseImage-ol6-<version>_RELEASE/Extras/CELL/ inflating: BDABaseImage-ol6-<version>_RELEASE/Extras/CELL/bd_cell-<version>_LINUX.X64_160506.11 ...
前の手順で作成したサブディレクトリに移動します。
# cd BDABaseImage-ol6-<version>_RELEASE
イメージを変更するサーバーにログインし、makebdaimageコマンドを実行します。次の例は、ベース・イメージから構成ファイルのカスタム設定にノード4のイメージを変更するコマンド(内部USBを含む)を示しています。rack-network.jsonおよびcluster-network.jsonをカンマで区切り、1つのパラメータとして送信します。
# ./makebdaimage -usbint BDABaseImage-<version>_RELEASE.iso /opt/oracle/bda/rack-network.json,/opt/oracle/bda/cluster-network.json 4
network.jsonファイル・パラメータとして送信することはできますが、推奨していません。
# ./makebdaimage -usbint BDABaseImage-<version>_RELEASE.iso /opt/oracle/bda/network.json 4
makebdaimageコマンドがエラーなしに成功した場合には、サーバーを再起動します。
注意:
ラック全体のイメージを変更すると、ラック上のすべてのクラスタ、ファイルおよびデータが消去されます。イメージの変更は、ソフトウェアのアップグレードには必要ありません。
ラックのすべてのサーバーにベース・イメージを再インストールするには、次の手順を実行します。
Oracle Big Data Applianceソフトウェアを以前にラックにインストールしている場合、Oracle Big Data Appliance以外の安全な場所に/opt/oracle/BDAMammoth/cluster_name-config.jsonファイルを保存します。
My Oracle SupportまたはOracle Automated Release Updates (ARU)から最新のベース・イメージ・パッチをダウンロードして、イメージを変更するラックの第1サーバー(最下部)にコピーします。
「Mammothソフトウェア・デプロイメント・バンドルのダウンロード」を参照してください。My Oracle Supportから基本イメージ・パッチをダウンロードするのと同じ基本手順を使用できます。
注意:
ベース・イメージの最新のバージョン4.xを使用します。Mammothバンドルに含まれているバージョンは使用しないでください。
第1サーバーのSSH接続を確立して、rootとしてログインします。
既存のカスタマ・ネットワーク設定のイメージを再適用するには、意図したネットワーク構成が/opt/oracle/bda/network.jsonに反映されていることを確認します。反映されていない場合は、Oracle Big Data Appliance構成生成ユーティリティを使用して新しいファイルを生成します。
パスワードなしSSHが設定されていることを確認します。
# dcli hostname
192.168.41.37: bda1node01.example.com
192.168.41.38: bda1node02.example.com
192.168.41.39: bda1node03.example.com
.
.
.
このコマンドがエラーなしで実行されると、Oracle Big Data Applianceのすべてのサーバーのホスト名が返されます。そうではない場合、「パスワードなしSSHの設定」の手順に従ってください。すべてのサーバーでdcli hostnameコマンドが正常に実行されるまで、作業を継続しないでください。
すべてのOracle Big Data Applianceサーバーでハードウェアの問題をチェックします。
# dcli bdacheckhw | grep -v SUCCESS
ラックにイメージを再適用する前に、ハードウェアのエラーおよび警告を解決します。
すべてのサーバーのルート(/)パーティションが4GB以上空いていることを確認します。
# dcli df -h /
192.168.41.37: Filesystem Size Used Avail Use% Mounted on
192.168.41.37: /dev/md2 161G 21G 132G 14% /
192.168.41.38: Filesystem Size Used Avail Use% Mounted on
192.168.41.38: /dev/md2 161G 19G 135G 12% /
192.168.41.39: Filesystem Size Used Avail Use% Mounted on
192.168.41.39: /dev/md2 161G 23G 131G 15% /
.
.
.
ダウンロードしたベース・イメージのZIPファイルを解凍します。次に例を示します。
# unzip p<number>_<version>_Linux-x86-64.zip Archive: p<number>_<version>_Linux-x86-64.zip creating: BDABaseImage-ol6-<version>_RELEASE/ inflating: BDABaseImage-ol6-<version>_RELEASE/biosconfig inflating: BDABaseImage-ol6-<version>_RELEASE/makebdaimage extracting: BDABaseImage-ol6-<version>_RELEASE/BDABaseImage-ol6-<version>_RELEASE.md5sum inflating: BDABaseImage-ol6-<version>_RELEASE/reimagerack inflating: BDABaseImage-ol6-<version>_RELEASE/reimagecluster inflating: BDABaseImage-ol6-<version>_RELEASE/BDABaseImage-ol6-<version>_RELEASE.iso . . .
前の手順で作成したサブディレクトリに移動します。
# cd BDABaseImage-ol6-<version>_RELEASE
次のいずれかの手順を完了します。
カスタマ・ネットワーク用に構成されたOracle Big Data Applianceにイメージを再適用して同じカスタマ・ネットワーク設定にするには、./reimagerackコマンドを実行します。
工場出荷時の設定を維持するアプライアンスのイメージに変更するには、次のようにします。
/opt/oracle/bda/network.jsonが存在しないことを確認します。
./reimagerackコマンドを実行します。
カスタム・ネットワーク設定を使用して構成されたラックで工場出荷時のネットワーク設定をリストアするには、次のようにします。
Oracle Big Data Appliance以外の安全な場所に/opt/oracle/bda/network.jsonをコピーします。
/opt/oracle/bda/BdaShip.jsonが存在することを確認します。
ラックのイメージを変更します。
./reimagerack deploy ship
Mammothを実行します。
関連項目:
reimagerackコマンドの完全な構文については、reimagerack。
Mammothの実行の手順については、「ソフトウェアのインストール」。
この手順を実行して、Mammothユーティリティが単一クラスタとしてデプロイしたサーバー・グループのイメージを変更します。Mammothが単一クラスタとしてデプロイしたサーバー・グループでのみ使用できます。現在のネットワーク設定を再適用することも、工場出荷時の設定に戻すこともできます。
注意:
クラスタのイメージを変更すると、クラスタ上のすべてのファイルとデータが消去されます。イメージの変更は、ソフトウェアのアップグレードには必要ありません。
必須の前提条件
Oracle Big Data Appliance構成ユーティリティで生成されたファイル<rack_name>-rack-network.jsonおよび<cluster_name>-cluster-network.jsonの名前をrack-network.jsonおよびcluster-network.jsonにそれぞれ変更する必要があります。つまり、ラック名とクラスタ名の接頭辞と最初のハイフンを取ります。これらの接頭辞の唯一の目的は、構成ユーティリティの出力でクラスタまたはラックを区別することです。
重要:
イメージを変更する前に、/opt/oracle/bda/rack-network.jsonおよび/opt/oracle/bda/rack-network.jsonがクラスタのすべてのノードに存在している必要があります。クラスタ内のすべてのサーバーのベース・イメージを再インストールするには、次の手順を実行します。
ヒント:
reimageclusterユーティリティは、ラックの各サーバーの内部USBドライブにインストーラを作成し、インストールを初期化して各サーバーを再起動します。サーバーが再起動のために停止している間、Integrated Lights Out Manager (ILOM)を使用して各サーバーにログオンし、進捗を監視できます。 <server name>-ilom.<domain>.com
「Remote Control」、「Redirection」、「Launch Remote Console」の順にクリックし、イメージの変更をモニタリングするJavaコンソールを起動します。
Oracle Big Data Applianceソフトウェアを以前にラックにインストールしている場合、Oracle Big Data Appliance以外の安全な場所に/opt/oracle/BDAMammoth/mammoth-<rack_name>.paramsファイル(または/opt/oracle/BDAMammoth/<cluster_name>-config.json)を保存します。クラスタがアップグレードされている場合、ファイルは/opt/oracle/BDAMammoth/previous-BDAMammothディレクトリに存在している可能性があります。
Oracle Big Data Applianceベース・イメージのTARファイルをMy Oracle Supportから一時ディレクトリにダウンロードします。イメージを変更するクラスタの最初の(最も下にある)サーバーにコピーします。
イメージ変更を現在の設定に適用する場合は、意図したネットワーク構成が/opt/oracle/bda/rack-network.jsonおよびcluster-network.jsonに反映されていることを確認します。そうでない場合は、Oracle Big Data Appliance構成生成ユーティリティを使用して新しいファイルを生成します。
第1サーバーのSSH接続を確立して、rootとしてログインします。
パスワードなしSSHがクラスタに設定されていることを確認します(dcli -C hostnameがエラーなしで動作する必要があります)。設定されていない場合は、setup-root-ssh -Cを実行します。
# setup-root-ssh -C Enter root password: ... ... setup-root-ssh succeeded
dcli -C hostnameがエラーなしで実行されると、クラスタ内のすべてのOracle Big Data Applianceサーバーのホスト名が返されます。そうではない場合、「パスワードなしSSHの設定」の手順に従ってください。すべてのサーバーでdcli -C hostnameコマンドが正常に実行されるまで、作業を継続しないでください。
すべてのサーバーのルート(/)パーティションが4GB以上空いていることを確認します。
# dcli -C df -h / 10.xxx.xxx.xx: Filesystem Size Used Avail Use% Mounted on 10.xxx.xxx.xx: /dev/md2 459G 49G 387G 12% / 10.xxx.xxx.xx: Filesystem Size Used Avail Use% Mounted on ...
ダウンロードしたベース・イメージのZIPファイルを解凍します。次に例を示します。
# unzip p<number>_<version>_Linux-x86-64.zip Archive: p<number>_<version>_Linux-x86-64.zip creating: BDABaseImage-ol6-<version>_RELEASE/ creating: BDABaseImage-ol6-<version>_RELEASE/Extras/ creating: BDABaseImage-ol6-<version>_RELEASE/Extras/BALANCER/ extracting: BDABaseImage-ol6-<version>_RELEASE/Extras/BALANCER/orabalancer-<version>-h2.zip inflating: BDABaseImage-ol6-<version>_RELEASE/Extras/BALANCER/orabalancer-<version>-h2.noarch.rpm extracting: BDABaseImage-ol6-<version>_RELEASE/Extras/BALANCER/orabalancerdemo-<version>-h2.zip creating: BDABaseImage-ol6-<version>_RELEASE/Extras/CELL/ inflating: BDABaseImage-ol6-<version>_RELEASE/Extras/CELL/bd_cell-<version>_LINUX.X64_160506.11 ...
前の手順で作成したサブディレクトリに移動します。
# cd BDABaseImage-ol6-<version>_RELEASE
次の手順のいずれかに従って、Oracle Big Data Appliance全体のイメージを変更します。第1の方法は、既存の設定を維持することです。第2の方法は、工場出荷時の設定(Oracle Big Data Appliance Configuration Utility設定の前)に戻すことです。
既存のネットワーク設定のイメージの変更および維持
/opt/oracle/bda/に、network.jsonおよびBdaShip.jsonの両方がリストされていることを確認します。
# ls *.json network.json BdaShip.json
network.jsonがリストされていない場合、customer-specific network.jsonファイル(維持する構成を記述したファイル)を探します。まず、このファイルがネットワーク設定を正しく定義していることを確認します。定義していない場合は、Oracle Big Data Appliance構成生成ユーティリティを使用して新しいファイルを生成します。ファイルを/opt/oracle/bdaにコピーし、ファイル名をnetwork.jsonに変更します。
dcliコマンドを使用して、network.jsonをクラスタのすべてのノードにコピーします。
# dcli -C -f /opt/oracle/bda/network.json -d /opt/oracle/bda/
./reimageclusterコマンドを実行します。 このコマンドにより表示される出力の一部を次に示します。
# ./reimagerack Passwordless SSH set up to all hosts : xxx.xxx.xx.xx xxx.xxx.xx.xx xxx.xxx.xx.xx xxx.xxx.xx.xx xxx.xxx.xx.xx xxx.xxx.xx.xx Using /tmp/BDABaseImage-ol6-<version>_RELEASE/BDABaseImage-ol6-<version>_RELEASE.iso to re-image BDABaseImage-ol6-<version>_RELEASE.iso: OK Re-imaging to existing customer network settings FINAL CONFIRMATION : All of the following hosts will be completely erased, re-imaged and initialized including resetting of the iloms: xxx.xxx.xx.xx xxx.xxx.xx.xx xxx.xxx.xx.xx xxx.xxx.xx.xx xxx.xxx.xx.xx xxx.xxx.xx.xx Proceed [y/n]? y Running hardware checks on all nodes... ... Rebooting all servers Broadcast message from root@bda1node01.example.com (unknown) at 15:58 ... The system is going down for reboot NOW!
工場出荷時のネットワーク設定のイメージの復元
手順1で説明したように、/opt/oracle/bda/rack-network.jsonおよびcluster-network.jsonがOracle Big Data Applianceの外部の安全な場所にコピーされており、/opt/oracle/bda/BdaShip.jsonが存在することを確認します。
次のコマンドを使用して、クラスタのイメージを工場出荷時の設定に戻します。
# ./reimagecluster deploy ship
reimageclusterによる再起動が完了した後、setup-root-sshを実行し、ラックのすべてのサーバーとの接続を確立します。 dcliコマンドを使用してすべてのサーバーをもう一度再起動できるようにするには、この作業が必要です。# setup-root-ssh Enter root password: ... setup-root-ssh succeeded
dcli再起動コマンドを使用して、すべてのサーバーをもう一度再起動します。
# dcli reboot
ファイル/root/BDA_IMAGING_SUCCEEDEDおよび/root/BDA_REBOOT_SUCCEEDEDが、ラックの各サーバーに存在することを確認します。
# dcli ls -lrt /root/BDA_*
/root/BDA_REBOOT_SUCCEEDEDの日付およびタイムスタンプが、イメージ変更プロセスにおける再起動の時間に一致していることを確認します。ファイルは0バイトである場合も、INFOメッセージが含まれる場合もあります。
インストールされたベース・イメージのバージョンを確認します。
# imageinfo Big Data Appliance Image Info IMAGE_VERSION : <version> IMAGE_CREATION_DATE : Wed May 18 20:19:54 UTC 2016 IMAGE_LABEL : BDA_<version>_LINUX.X64_RELEASE LINUX_VERSION : Oracle Linux Server release <version> KERNEL_VERSION : 2.<version>.el6uek.x86_64 BDA_RPM_VERSION : bda-<version>-1.el6.x86_64 OFED_VERSION : OFED-IOV-<version> JDK_VERSION : jdk1.<version>-fcs.x86_64
Mammothユーティリティを起動し、システムをOracle Big Data Applianceの最新のバージョンにすることができるようになります。
関連項目:
このMOSノート『Oracle Linux 6での新規インストールおよび既存のインストールのプロビジョニングのためのOracle Big Data Applianceベース・イメージ・バージョン4.5.0』(Doc ID 2173434.1)では、イメージの変更の追加の詳細が記載されています
個別パッチ・バンドルは、1つ以上のリリースの特定の不具合に対する修正を提供します。Mammothを使用してクラスタにパッチを適用します。
個別パッチ・バンドルをインストールするには、次の手順を実行します。
自動リリース更新(ARU)システムからパッチ・バンドルをOracle Big Data Applianceクラスタの第1ノードのディレクトリ(/tmpなど)にダウンロードします。
ファイルは、BDA-patch-release-patch.zipという名前です。この手順の例では、BDA-patch-<version>-123456.zipの名前を使用します。
ファイルを解凍します。次に例を示します。
# unzip BDA-patch-<version>-123456.zip Archive: BDA-patch-<version>-123456.zip creating: BDA-patch-<version>-123456/ inflating: BDA-patch-<version>-123456/BDA-patch-<version>-123456.run inflating: BDA-patch-<version>-123456/README.txt
手順2で作成したパッチ・ディレクトリに移動します。次に例を示します。
$ cd BDA-patch-<version>-123456
実行ファイルの内容を抽出します。次に例を示します。
$ ./BDA-patch-<version>-123456.run Big Data Appliance one-off patch 123456 for v<version> Self-extraction Removing existing temporary files Generating /tmp/BDA-patch-<version>-123456.tar Verifying MD5 sum of /tmp/BDA-patch-<version>-123456.tar /tmp/BDA-patch-<version>-123456.tar MD5 checksum matches Extracting /tmp/BDA-patch-<version>-123456.tar to /opt/oracle/BDAMammoth/patches/123456 Removing temporary files Please "cd /opt/oracle/BDAMammoth" before running "./mammoth -p 123456"
BDAMammothディレクトリに移動します。
$ cd /opt/oracle/BDAMammoth
パッチをインストールします。次に例を示します。
$ ./mammoth -p 123456
Mammothにより、パッチをローリング・アップグレードとしてロードするかどうかを選択するプロンプトが表示されます。(「ローリング・アップグレードについて」を参照してください)
あるいは、bdacliコマンドを使用できます。「bdacli」を参照してください。
Mammothを使用するには、rootとして第1サーバーにログインし、/opt/oracle/BDAMammothディレクトリに移動する必要があります。構文は次のとおりです。
./mammoth option [cluster_name] ]
このコマンドで、cluster_nameはクラスタの名前です。cluster_nameは、cluster_name-config.jsonに示されているとおり、最初のコマンドに正確に入力する必要があります。その後、cluster_nameはデフォルトで前のmammothコマンドで指定されたラックになります。
あるラックのインストールを完了してから、別のラックのインストールを開始する必要があります。
例10-1 Mammothの構文例
次のコマンドでは、Mammothユーティリティのヘルプを表示します。
./mammoth -h
次のコマンドでは、ラックbda3に対して完全なインストールを実行します。
./mammoth -i bda3
このコマンドでは、設定中のラックに対してステップ2から6を実行します。
./mammoth -r 2-6
このコマンドは、スタータ・ラックのnode07から数えて6つの新しいサーバーを既存のクラスタに追加する、パラメータ・ファイルを生成します。
./mammoth -e node07 node08 node09 node10 node11 node12
mammothコマンドの構文は、新しいクラスタの構成をサポートします。Mammothバンドルを使用して、以前のリリースからアップグレードすることもできます。
Oracle Big Data Applianceのクラスタ・チェックを実行します。
クラスタに追加するサーバーのリストのパラメータ・ファイルを生成します。次に、新しいノードをクラスタに追加して、必要なソフトウェアをノードにインストールします。
同じラックまたは複数のラックにあるリストのサーバーを指定できます。
再起動は、通常は新しいノードおよび工場出荷時の初回更新時のみに実行されます。
生成されるパラメータは、opt/oracle/BDAMammoth/<cluster_name>-config.json(<cluster-name>は拡張されるクラスタの名前です)です。パラメータ・ファイルにパスワードは含まれていないため、Mammothの実行時に入力する必要があります。クラスタ拡張では、拡張でノードのデフォルトのrootパスワードが必要になるため、拡張が完了するまでそのパスワードを保持してください。パスワードは後で必ず変更してください。
Oracle NoSQL Databaseクラスタでは、Mammothにより、新しいノードのゾーンの種類を要求されます。既存のゾーン、新しいプライマリ・ゾーンまたは新しいセカンダリ・ゾーンから選択できます。既存のゾーンに追加する場合は、使用できるゾーンの一覧が表示されます。新しいゾーンを作成する場合は、ゾーンの名前およびレプリケーション・ファクタを要求されます。
コマンドの使用方法とステップのリストが含まれるコマンド・ヘルプを表示します。
クラスタですべての必須ステップを実行します。フル・ラックの場合は、-r 1-18と同じです。このオプションは、新しいラックを構成する場合や、クラスタにサーバー・グループを追加する場合に使用します。
Mammothユーティリティのステップをリストします。
クラスタのソフトウェアを最新バージョンにアップグレードするか、個別パッチをインストールします。
エラーが発生しないかぎり、MammothのステップnからNまでを実行します。
ステップnを実行します。同じラックの別のクラスタを指定するには、cluster_nameを入力します。-eオプションを参照してください。
Mammothのバージョン番号を表示します。
次に、ソフトウェアのインストール時にMammothが実行するステップについて説明します。
このステップでは、次の複数のタスクが実行されます。
構成ファイルを検証し、パスワードを要求します。
パスワードを入力せずに管理ネットワークのすべてのアドレスに接続できるように、rootユーザーに対してセキュア・シェル(SSH)を設定します。
インフィニバンド・ネットワークのrootユーザーに対してパスワードなしSSHを設定します。
構成ファイルから/etc/hostsを生成し、インフィニバンド接続を使用して内部的に通信できるようにそれをすべてのサーバーにコピーします。このファイルによって、プライベートIPアドレスがパブリック・ホスト名にマップされます。
Mammothが実行されるノードをPuppetマスター・ノードとして識別するための別名を設定します。たとえば、IPアドレス192.168.41.1でbda1node01からMammothを実行した場合、そのIPアドレスの別名のリストにはbda1node01-masterが含まれています。Mammothでは、ソフトウェア・インストールにPuppetを使用します。
すべてのノードでネットワーク・タイミングを確認します。タイミング・チェックに失敗した場合、インストールの正常な実行を妨げる未解決の名前およびIPアドレスが存在します。インストールを続行する前に、これらの問題を修正してください。
このステップでは、様々なハードウェアおよびソフトウェア・チェックも実行されます。次のチェックのいずれかに失敗すると、Mammothも失敗します。
ARPキャッシュ問合せ時間が2秒以下であること。
すべてのサーバー・クロックが現在のサーバーの10秒以内で同期していること。
すべてのサーバーが前回の再起動に成功し、/root/BDA_REBOOT_SUCCEEDEDファイルが生成されていること。
bdacheckhwユーティリティが成功したこと。
bdacheckswユーティリティが成功したこと。
このステップでは、すべてのノードでPuppetエージェントを構成して起動し、Mammothが実行されているノードでPuppetマスターを構成し、エージェントが証明書を発行するのを待機してその署名を自動化します。このステップでは、すべてのノードのrootパスワードの変更も行います(オプション)。このステップが完了すると、Puppetはソフトウェアをデプロイできます。
Puppetは、Hadoopクラスタを管理するために一般的に使用される分散構成管理ツールです。Puppetマスターは、親のサービスであり、Puppetリポジトリを管理します。Puppetエージェントは、各Hadoopノードで動作します。
/etc/puppet/puppet.confという名前のファイルがすべてのサーバーに存在し、Puppetマスターの場所を指定します。
Puppetは2つのモードで動作します。
定期的プル・モード: Puppetエージェントは定期的にPuppetマスターと通信し、更新の有無を確認します。
キック・モード: Puppetマスターは、構成の更新が使用できるというアラートをPuppetエージェントに通知し、エージェントは更新の有無を確認します。Puppetは、Mammothのインストール中はキック・モードで動作します。
どちらのモードでも、Puppetマスターは、エージェントを信頼する必要があります。この信頼を確立するため、エージェントは、システム管理プロセスによる署名が行われるPuppetマスター・ノードに証明書を送信します。このトランザクションが完了すると、Puppetマスターは、エージェントに新しい構成を送信します。
後続のステップでは、「インストール中にエラーが発生した場合の対処方法」の説明に従って、各サーバーのPuppetログ・ファイルを確認できます。
最新のOracle Big Data Applianceイメージおよびシステム・パラメータ設定をインストールします。カーネルがアップグレードされた場合、システムは自動的に再起動します。
ライセンス契約の要件に応じて、サード・パーティ・ライセンスをすべてのサーバーの/opt/oss/src/OSSLicenses.pdfにコピーします。
ライセンス契約の要件に応じて、サード・パーティ・ソフトウェアのソース・コードをすべてのサーバーの/opt/oss/src/にコピーします。
Mammothはソース・コードをOracle NoSQL Databaseクラスタにコピーしません。
hdfsおよびmapredユーザーと、hadoopグループを作成します。また、oracleユーザーと、dbaおよびoinstallグループも作成します。
後のステップでインストールされる様々なパッケージによっても、インストール中にユーザーおよびグループが作成されます。
関連項目:
ユーザーおよびグループの詳細は、『Oracle Big Data Applianceソフトウェア・ユーザーズ・ガイド』を参照してください。
NameNodeデータが設定されているディスクまたはノード全体で障害が発生した場合にこの重要な情報の損失を防ぐため、このデータを複数の場所にコピーします。
MySQL Databaseをインストールして構成します。このステップでは、Cloudera Managerで使用するためにnode03にプライマリ・データベースと複数のデータベースが作成されます。また、node02のバックアップ・データベースに対するプライマリ・データベースのレプリケーションも設定されます。
MammothはOracle NoSQL DatabaseクラスタにMySQL Databaseをインストールしません。
クラスタでセキュリティを設定するために使用されるKerberosキー配布センター(KDC)を構成します。
Cloudera's Distribution including Apache Hadoop (CDH)およびCloudera Managerのすべてのパケットをインストールします。その後、node03でCloudera Managerサーバーを起動し、クラスタを構成します。
MammothはOracle NoSQL DatabaseクラスタにCDHまたはCloudera Managerをインストールしません。
すべてのノードのエージェントを起動し、すべてのCDHサービスを開始します。HTTPS/ネットワーク暗号化が有効になっている場合は、Cloudera Manager、HueおよびOozieに対してもHTTPSを有効にします。
このステップの後、Hadoopインストール環境が完全に機能します。
Cloudera Managerは、node03のポート7180で実行されます。これは次のようにブラウザで開くことができます。
http://bda1node03.example.com:7180
この例では、bda1node02がnode02の名前で、example.comがドメインです。デフォルトのユーザー名とパスワードはadminです。パスワードはこのステップの最後に変更するように求められます。
Oracle NoSQL Databaseクラスタでは、MammothはCDHサービスをインストールも開始もしません。
Oracle Big Data Appliance構成生成ユーティリティでこのオプションを選択した場合は、Oracle Big Data Connectorsのサーバー側コンポーネントをインストールします。Oracle Big Data Connectorsにはライセンスが別途必要です。オプションです。
Oracle Big Data Appliance構成生成ユーティリティでこのオプションを選択した場合は、Oracle Big Data SQLのサーバー側コンポーネントをインストールします。Oracle NoSQL DatabaseのOracle Big Data SQLサポートの場合、このステップではCDHノードにクライアント・ライブラリ(kvclient.jar)をインストールします。Oracle Big Data SQLにはライセンスが別途必要です。オプションです。
Oracle NoSQL Databaseを使用するために割り当てられたクラスタに、Oracle NoSQL Databaseをインストールします。Enterprise Editionにはライセンスが別途必要です。
このステップで実行されるアクションは、インストールに先立ってOracle Big Data Appliance構成ユーティリティで行った選択に基づきます。
このオプションが選択されている場合は、HTTPS/ネットワーク暗号化を構成します。
このオプションが選択されている場合は、HDFS透過的暗号化を構成します。
Mammothは、インストールに先立って構成ユーティリティでローカルと外部のどちらのKey Trustee Serverを選択したかに応じて、HDFS透過的暗号化に必要なNavigator Key Trusteeサービスを設定します。
構成ユーティリティで「Setup Key Trustee Servers on the BDA」を選択した場合、MammothはOracle Big Data Appliance上でローカルにアクティブおよびパッシブKey Trustee Serverを設定します。
外部Key Trustee Serverを使用するように選択した場合、この設定で外部サーバーへの接続が構成されます(MOS Doc ID 2112644.1の説明に従って外部Navigator Key Trustee Serverがすでに構成されている必要があります)。
このオプションを選択した場合には、Kerberos認証を構成します。Oracle Big Data Applianceでキー配布センターを設定している場合には、前提条件はありません。それ以外の場合には、「インストールの前提条件」を参照してください。
自動サービス・リクエスト(ASR)をインストールして構成します。オプションです。
このステップでは、次のことが実行されます。
必要なソフトウェア・パッケージをインストールします。
トラップ宛先を構成します。
監視デーモンを起動します。
ASRマネージャからアセットをアクティブ化するには、「ASRアセットの確認」を参照してください。
注意:
このステップを正常に実行するには、ASRマネージャが実行され、適切に構成されたASRホスト・システムが稼働している必要があります。「自動サービス・リクエストの設定」を参照してください。
次のことが実行されます。
Cloudera Managerパスワードを変更します(インストール・テンプレートに指定されている場合)。
インストール中に作成された一時ファイルを削除します。
すべてのノードから/opt/oracle/bda/install/logのサブディレクトリにログ・ファイルをコピーします。
クラスタ検証チェック(TeraSortを含む)を実行して、すべてが適切に動作することを確認します。また、インストール・サマリーも生成されます。すべてのログは、node01の/opt/oracle/bda/install/log以下のサブディレクトリに格納されます。
「PreinstallChecks」で設定したrootのパスワードなしSSHを削除します。
次のユーティリティは、ベース・イメージのバンドルで配布されています。ユーティリティを実行するには、rootとしてログインする必要があります。
単一のサーバー、クラスタ、またはラック全体にベース・イメージを再インストールします。reimageclusterとreimagerackのどちらもこのユーティリティを呼び出します。
makebdaimageユーティリティには次の構文があります。
makebdaimage [--usb | --usbint] [--noiloms] /path/BDABaseImage-version_RELEASE.iso /path/BDdaDeploy.json target_servers
オプション
イメージの変更に使用するUSBポートを指定します。外部USBドライブの場合は--usb、内部ドライブの場合は--usbintを使用します。内部USBドライブにはLinuxの完全インストールが含まれます。
--usbintオプションを使用するには、ターゲット・サーバーにログインしている必要があります。ログインしていないと、間違ったネットワーク情報を使用してサーバーのイメージを変更する可能性があります。
イメージの変更処理によって、ターゲット・サーバー上のOracle ILOMが変更されることはありません。
イメージをインストールする1つ以上のサーバーを示し、次のいずれかの書式で指定します。
node_number
イメージを変更する単一のサーバーを指定します。サーバーのラック上の位置を下から数えて1から18で入力します。
from.json to.json
現在の構成(from.json)と必要な構成(to.json)を指定します。JSONファイルは、BdaShip.jsonの工場出荷時の構成またはnetwork.jsonのカスタム構成のいずれでもかまいません。構成されたサーバーの/opt/oracle/bdaにあります。
to.json: network.jsonやBdaShip.jsonに類似の連結されたJSONファイルですが、ETH0_MACSアレイ・エントリが追加されています。連結ファイルの最初のエントリと対応するeth0_macエントリがイメージを変更するときに使用されます。to.jsonファイルはそのまま使用されます。
dcliとmakebdaimageを使用して、クラスタ内のすべてのサーバーのイメージを同時に変更します。
reimageclusterユーティリティには次の構文があります。
reimagecluster [--no-iloms]
前提条件
次のコマンドがクラスタ内のサーバーのリストを返すことを確認します。
$ dcli -C hostname
BDABaseImage-version_RELEASE*.isoファイルが現在のディレクトリに1つだけあることを確認します。
dcliとmakebdaimageを使用して、ラック内のすべてのサーバーのイメージを同時に変更します。
reimagerackユーティリティには次の構文があります。
reimagerack [--no-iloms] [--no-macs] [--hosts n1, n2...] [from.json [to.json]]
前提条件
次のコマンドがラック内のサーバーのリストを返すことを確認します。
$ dcli -hostname
BDABaseImage-version_RELEASE*.isoファイルが現在のディレクトリに1つだけあることを確認します。
オプション
イメージの変更処理によって、ターゲット・サーバー上のOracle ILOMが変更されることはありません。
このユーティリティはサーバーのMACアドレスを取得しません。かわりに、インフィニバンドのケーブル配線を使用します。このオプションは、工場出荷時の設定を復元する場合にのみ使用します。コマンドラインに両方のJSONファイル(from.jsonとto.json)が含まれている必要があります。
ホスト名またはIPアドレスのカンマ区切りのリストのうち、dcliが受け入れたいずれかのリストで指定されたサーバーのイメージの変更を制限します。すべてのサーバーは、dcli -tコマンドで指定されたターゲット・サーバーのリストに含まれている必要があります。
このオプションでは--no-macsオプションが強制的に実行されるため、その制限も適用されます。
現在の構成ファイル(BdaShip.jsonまたはnetwork.json)へのフルパスです。
このオプションのデフォルト値は、/opt/oracle/bda/network.jsonです。network.jsonが見つからない場合、オプションのデフォルト値は、/opt/oracle/bda/BdaShip.jsonです。サーバーは事前にreimagerackで使用されているJSONファイルの値に設定されている必要があります。
イメージの変更後に有効になる新しいネットワーク構成へのフルパスです。network.jsonファイルまたはBdaShip.jsonファイルのいずれかになります。
