1. Oracle Essbaseデータベース管理者ガイド
  2. 並列計算の使用
  3. CALCPARALLEL並列計算

CALCPARALLEL並列計算

Essbaseのデフォルトのシリアル計算からCALCPARALLEL並列計算に変更するには、1つまたは2つの構成設定を変更してサーバーを再起動するか、計算スクリプトに命令を追加します。

手順については、「CALCPARALLEL並列計算の有効化」を参照してください。

次のトピックでは、並列計算の詳細について説明します。

CALPARALLELの実行可能性の分析

Essbaseでは、並列計算のCALPARALLELの方法を使用できるかどうかが、それを有効にしてある各計算パスの前に評価されます。

Essbaseでは、アウトラインおよび各計算パスに対して要求された計算が分析されます。1つの計算に複数のパスが必要となる場合があることに注意してください。一部の状況(動的計算、2パスとしてタグ付けされたメンバーの存在、または特定の種類の相互依存性が生成される計算など)では、複数のパスの必要性が生じる場合があります。「計算パス」を参照してください。

Essbaseによって、CALPARALLELの方法を使用した並列計算が可能であると判断された場合は、Essbaseで計算が、互いに独立した、より小さいタスクに分割されます。計算の間、Essbaseによって、より小さいタスクが同時に実行されます。

ただし、Essbaseでは、パスに関与する式の間に複雑な相互依存関係が存在する場合は、シリアル計算に分類し直されます。このような相互依存関係により、並列計算が不可能になることがあります。

FIXPARALLELの方法がご自分のユースケースにより適しているかどうかを検討してください。「FIXPARALLEL並列計算」を参照してください。

CALCPARALLEL並列計算のガイドライン

Essbaseアウトラインの構造およびアプリケーションの設計により、並列計算を有効化することで計算のパフォーマンスを改善できるかどうかが決まります。CALCPARALLEL方式の並列計算を有効にする前に、次のガイドラインを確認して、利点を十分に活用してください。

  • 1つ以上の式が計算に存在すると、EssbaseではCALCPARALLEL並列計算が有効な場合でもこれを使用できない場合があります。並列計算設定に関係なくシリアル計算を強制できる式の詳細は、「CALCPARALLEL並列計算と他のEssbase機能との関係」を参照してください。

  • 計算タスクはアウトラインの最後のnの疎ディメンションに沿って生成されます。タスクの識別に使用されるこれらの疎ディメンションは、タスク・ディメンションと呼ばれます。タスク・ディメンションの数であるnは、Essbaseによって動的に選択されるか、計算コマンドSET CALCTASKDIMS (またはアプリケーション構成設定CALCTASKDIMS)に値を指定してこの数を上書きできます。

    アウトライン内の疎ディメンションは、(MaxL文query database DBS-NAME get dbstats dimensionでレポートされるように)ディメンションの実際のサイズに基づいて、最も小さいものから最も大きいものの順に並べます。順序に関するこの推奨事項は、計算機キャッシュ・サイズの最適化のための推奨事項や、その他のアウトラインに関する推奨事項と一貫性があります。(最後の疎ディメンションよりも多くの)追加のディメンションを使用することが必要になる状況の詳細と、使用される疎ディメンションの数を増やす手順の詳細は、「並列計算の追加タスクの特定」を参照してください。

  • CALCPARALLEL並列計算は、パーティション化されていないアプリケーション、および次のようなパーティション化されたアプリケーションに対して効果的です。

  • 計算やデータ更新などの更新トランザクションは、MDX問合せやレポート・スクリプトより多くのリソースを消費する要求です。

CALCPARALLEL並列計算と他のEssbase機能との関係

EssbaseキューブでCALCPARALLEL並列計算を使用する場合は、取得パフォーマンス、式、計算機キャッシュ・ビットマップおよび透過パーティションに関する制限を考慮してください。

取得パフォーマンス

並列計算のパフォーマンスを最大化するために、最も大きい疎ディメンションをアウトラインの最後に配置すると、取得パフォーマンスの速度が低下する場合があります。

式の制約事項

いくつかの式が存在することによって、シリアル計算が強制される場合があります。次のように式を配置すると、シリアル計算が強制的に実行される可能性があります。

  • 密メンバー(すべての保管済メンバー、および保管済メンバーが依存するあらゆる動的計算メンバーを含む)に対する式によって、並列計算のタスクを識別するために使用される、ディメンション内のメンバーへの依存関係が発生する場合。

  • 計算スクリプト内で、@VAR、@ARRAY、@XREFまたは@XWRITEを使用して宣言された変数への参照が式に含まれる場合。かわりに、並列計算にFIXPARALLELを使用することを検討してください。

  • @XREFを使用する疎ディメンション・メンバーの式で、疎のメンバーのディメンションがフル計算される場合。@XREFは、バッチ計算中に他の保管済メンバーに依存しない密の動的計算メンバーにある場合、シリアル計算を強制実行しません。

  • メンバーの式によって循環的な依存が発生する場合。たとえば、メンバーAにメンバーBを参照する式があり、メンバーBにメンバーCを参照する式があり、メンバーCにはメンバーAを参照する式があるような場合。

  • 密または疎のメンバーに対する式が、並列処理のタスクの特定に使用されるディメンションの1つ以上のメンバーに依存する場合。

  • 疎ディメンション・メンバーの式に、他の疎ディメンションのメンバーへの参照が含まれる場合。

並列計算を妨げる可能性のある式を使用する必要がある場合は、FIXPARALLELを使用することを検討してください。または、式のメンバーを動的計算としてマークするか、その式を計算のスコープから除外できます。式によって並列計算が妨げられるかどうかを確認するには、アプリケーション・ログを確認します。関連するエラー・メッセージは、「CALCPARALLEL並列計算のモニター」を参照してください。

計算機キャッシュ

計算パスの開始時に、Essbaseで計算機キャッシュのサイズと並列性の度合いが確認され、その後、最大のパフォーマンスを得るための適切な計算機キャッシュのビットマップ・オプションが使用されます。そのため、並列計算に使用されるビットマップ・オプションは、シリアル計算に使用されるものとは異なる場合があります。

たとえば、Essbaseでシリアル計算が実行され、複数のビットマップと単一のアンカー・ディメンションが使用されるとします。計算機キャッシュを明示的に変更しないと、Essbaseでは単一のビットマップと単一のアンカー・ディメンションのみを使用して並列計算が実行される可能性があります。

ビットマップ・オプションを制御する計算機キャッシュ・モードは、アプリケーション・ログで、各計算パスが開始したときの次のようなエントリを確認することで判断できます。

Multiple bitmap mode calculator cache memory usage has a limit of [50000] bitmaps.

複数のビットマップ・モードで並列計算を使用すると、メモリー使用量が多くなる場合があります。その場合は、構成設定PARCALCMULTIPLEBITMAPMEMOPTを使用して、複数のビットマップ・モードでのメモリー使用を最適化できます。この設定は、MULTIPLEBITMAPMEMCHECKとともに使用することも、別々に使用することもできます。PARCALCMULTIPLEBITMAPMEMOPTを有効にするには、アプリケーション構成に次を追加します: 

PARCALCMULTIPLEBITMAPMEMOPT TRUE

透過パーティションの制約事項

透過パーティションが含まれる並列計算には次のような制約事項があります。

  • 計算がターゲットで発生しないかぎり、透過パーティション間では並列計算を使用できません。

  • タスク・ディメンションを1に設定する必要があります。これを行うには、SET CALCTASKDIMS計算コマンドまたはCALCTASKDIMS構成設定を使用します。

  • 複数のビットマップを使用できるように、計算機キャッシュを増やす必要があります。ビットマップ・オプションを制御する計算機キャッシュ・モードは、アプリケーション・ログで、各計算パスが開始したときの次のようなエントリを確認することで特定できます。

    Multiple bitmap mode calculator cache memory usage has a limit of [50000] bitmaps.

現在のCALCPARALLEL設定の確認

使用する予定のアプリケーション構成または計算スクリプトを確認して、EssbaseキューブでCALCPARALLEL方式の並列計算が有効かどうかを確認できます。

CALCPARALLEL方式の並列計算が有効かどうかをアプリケーション・レベルで確認するには、構成パラメータCALCPARALLELを検索して、指定されている値を確認します。

または、キューブ(または計算スクリプト)で、並列計算にFIXPARALLELコマンド・ブロックを使用することもできます。

CALCPARALLELの場合、計算を完了するために同時にタスクを実行できるスレッドの数には、1から128の間の値が指定されています。64ビットのプラットフォームで稼働中のブロック・ストレージ(BSO)および集約ストレージ(ASO)データベースは、最大128のスレッドをサポートします。

計算スクリプトでCALCPARALLEL方式の並列計算が設定されるかどうかを確認するには、SET CALCPARALLELコマンドを見つけます。スクリプトによって並列計算が複数回有効化または無効化される場合があるため、スクリプトは慎重に確認してください。

CALCPARALLEL並列計算の有効化

EssbaseキューブでCALCPARALLEL方式の並列計算を使用するには、アプリケーションに対してこれを有効にするか、1つ以上の計算スクリプトに対してのみ実装します。

EssbaseキューブでCALCPARALLEL並列計算を使用するには、次のいずれかの方法を使用します:

次のワークフローに従って、CALCPARALLEL方式の並列計算を有効にします:

  1. アプリケーション構成で並列計算を有効にする予定の場合は、現在のステータスを調べて、エントリが存在するかどうかを確認します。「現在のCALCPARALLEL設定の確認」のプロセスを使用します。
  2. 計算スクリプトにSET CALCPARALLELを追加します。
  3. 必要に応じて、並列計算のタスクを特定するために、Essbaseで複数の疎ディメンションを使用できるようにします。
  4. 計算を実行します。

ヒント:

サイトで必要な場合は、CALCPARALLELとSET CALCPARALLELを組み合せて使用できます。たとえば、CALCPARALLELをサーバー・レベルでオフとして設定し、計算スクリプトを使用して、並列計算を必要に応じて有効化および無効化できます。

並列計算の追加タスクの特定

デフォルトでは、Essbaseで反復的な手法が使用され、CALCPARALLEL方式の並列計算に使用するタスク・ディメンションの最適な数が選択されます。

必要に応じて、EssbaseがCALCPARALLEL方式の並列計算に特定の数のタスク・ディメンションを使用するようにできます。

たとえば、最後の疎ディメンションのメンバーにFIX文がある場合、アウトラインから最後の1つ前にある疎ディメンションも含めることができます。これら2つのディメンションのメンバーの一意の組合せは、それぞれが潜在的なタスクとして特定されるため、より多くのより小さいタスクが作成され、並列処理の可能性が高まり、ロード・バランシングが改善されます。

並列計算のタスク・ディメンション数を指定するには、次のようにします。

  1. 並列計算が有効かどうか不明な場合は、「現在のCALCPARALLEL設定の確認」で説明しているプロセスを使用して確認します。CALCPARALLELが有効化されていない(または計算スクリプトでSET CALCPARALLELが使用されていない)場合、CALCTASKDIMSは効力を持ちません。
  2. オプション: Essbaseでは、デフォルト数であるnのタスク・ディメンションが選択されて並列計算に使用され、この数はアプリケーション・ログ・ファイルに情報メッセージとして表示されます(例: Parallelizing using [2] task dimensions)。デフォルトのnの設定を上書きするには、アプリケーションのCALCTASKDIMS構成設定を追加または変更するか、計算スクリプト・コマンドSET CALCTASKDIMSを使用します。
  3. 計算スクリプトを実行します。

場合によっては、EssbaseではCALCTASKDIMSまたはSET CALCTASKDIMSで指定された数より少ないディメンションを使用してタスクが特定されます。

ログ・メッセージを使用したCALCPARALLELの調整

ログ・メッセージを慎重に分析すると、Essbaseによる並列計算プロセスのタスクへの分割方法の最適化に役立ちます。

CALCPARALLEL並列計算を使用している場合、次のログ・メッセージが表示されることがあります。

Current selection of task dimensions [n] will generate insufficient number of tasks [n] for parallel calculation. See whether calculation time can be improved by increasing the number of task dimensions by one (see SET CALCTASKDIMS topic in the documentation). Also, consider using FIXPARALLEL to make custom task selections that are different from CALCPARALLEL.

このメッセージが表示された場合、これは並列計算の実行中に、タスクが少なくなりすぎる結果になる場合に備えて、Essbaseがタスク・ディメンションを増加しなかったことを意味します。タスクが少なくなりすぎた場合、計算スケジュールのオーバーヘッドが並列性の利点を上回る場合があります。一方、タスクが多くなりすぎた場合は、並列計算スレッドが効力を持つのに十分なタスクが存在しない場合があります。

次の可能性があるタスク・ディメンションが最初の疎ディメンションではない場合、SET CALCTASKDIMS計算コマンド(またはCALCTASKDIMS構成設定)を使用してタスク・ディメンション数を1つずつ増やし、それに伴って計算の速度が改善されるかどうかを確認することを検討してください。また、FIXPARALLELを使用して、CALCPARALLELとは異なるカスタム・タスクを選択することを検討してください(「FIXPARALLEL並列計算」を参照)。

Current number of task dimensions [n] for parallel calculation might have caused too many tasks [n] to be generated. See whether calculation time can be improved by decreasing the number of task dimensions by one (see SET CALCTASKDIMS topic in the documentation). Also, consider using FIXPARALLEL to make custom task selections that are different from CALCPARALLEL.

並列計算では、タスクの数が十分にあることが、データ・スキューの影響を減らすために役立ちます。一方、タスクが多すぎる場合(適切なサイズのタスクであっても)、スケジュール・オーバーヘッドがこの利点を上回る場合があります。Essbaseでは、最適な範囲がターゲットに設定されます。前述のメッセージが表示された場合、Essbaseが、推奨される最小数のタスクに合致するように、さらに1つタスク・ディメンションの追加を試みたことを意味し、これにより、タスク数の上限を超えた可能性があります。

Essbaseによって選択された最後のタスク・ディメンションが唯一のタスク・ディメンションではない場合、SET CALCTASKDIMS計算コマンド(またはCALCTASKDIMS構成設定)を使用してタスク・ディメンション数を1つずつ減らし、それに伴って計算の速度が改善されるかどうかを確認することを検討してください。また、FIXPARALLELを使用して、CALCPARALLELとは異なるカスタム・タスクを選択することを検討してください。

CALCPARALLEL並列計算のモニター

並列計算に関連するイベントをアプリケーション・ログで参照できます。Essbaseでは、それぞれの計算パスについて、複数のタイプの情報をアプリケーション・ログに書き込むことで並列計算をサポートします。

並列計算を使用できる場合

並列計算を有効化し、Essbaseによって並列計算が有効であると判断されている場合は、Essbaseによって、アプリケーション・ログに次のようなメッセージが書き込まれます。 

Calculating in parallel with n threads

nは、CALCPARALLELまたはSET CALCPARALLELで指定された、同時タスクの数を表します。

式のために並列計算を使用できない場合

並列計算の使用を妨げる(シリアル計算を強制的に実行する)式については、Essbaseにより、アプリケーション・ログに次のメッセージが書き込まれます。 

Formula on (or backward dependence from) mbr memberName prevents calculation from running in parallel.

memberNameは、関連する式が存在するメンバーの名前を表します。アプリケーション・ログでこのようなメッセージを確認し、式を削除することを検討でき、また、可能な場合は、関連するメンバーを動的計算としてタグ付けして、それらのメンバーが計算パスで機能しないようにすることを検討できます。

Essbaseにより次のメッセージがアプリケーション・ログに書き込まれ、同時に実行可能なタスクの数が示されます(データに基づき、CALCPARALLELまたはSET CALCPARALLELの値には基づかない)。 

Calculation task schedule [576,35,14,3,2,1]

前述のメッセージ例は、576のタスクを同時に実行できることを示しています。576のタスクが完了した後、続いてさらに35のタスクを実行でき、以降同様に続きます。

並列計算の優位性は、最初のいくつかのステップで最も大きく、同時に実行されるタスクが少なくなると、それに応じて減少します。

並列性の度合いは、タスク・スケジュールにあるタスクの数に依存します。この数が多いほど、並行して実行できるタスクの数が増え、パフォーマンスが向上します。

並列計算の結果が空のタスクになる場合

Essbaseによりアプリケーション・ログ・ファイルに書き込まれるメッセージで、空の(計算が含まれない)タスクの数が示されます。 

Info(1012681) Empty tasks [291,1,0,0,0,0]

前述の例では、レベル0では291のタスクが空であることがEssbaseにより示されています。

計算タスク・スケジュールで指定されたタスク数に対する空のタスク数の比率が50%を超える(たとえば、291 / 576)場合は、データ・モデル内の密度が低いため、並列によりパフォーマンスが改善されない可能性があります。

密と疎の割当てを変更して空のタスク数を減らすことで、並列計算によるパフォーマンスの向上を促進できます。