LOAD パフォーマンスの向上

データ、ターゲット・オブジェクト、および使用可能なリソースに応じて、LOAD ユーティリティーのパフォーマンスを改善する可能性のある特定の処置を取ることができます。 例えば、入力データをプリプロセスする、特定の LOAD オプションを指定する、などの処置があります。

このタスクについて

ハッシュにより編成される表に対する LOAD のパフォーマンスは低速になる傾向があることに注意してください。 その理由は、ページで連続してロードされるのではなく、ハッシュ・キーに従って行がロードされるためです。

手順

LOAD のパフォーマンスを改善するには、推奨される以下の処置のうち、該当するものを 1 つ以上実行してください。

  • 数値データを内部形式でロードする。 DB2 内部形式 は、FORMATINTERNAL オプションを指定して UNLOAD を実行することで作成される形式です。
  • LOAD REPLACE を指定する場合は、インライン・コピーを作成するために、COPYDDN また は RECOVERYDDN で LOG NO を指定する。
  • 入力データをプリプロセスする。 以下のようにして、LOAD するデータを最適の順序にする。
    • データをクラスター順にソートして、ロード後の再編成の必要を避ける。
    • 外部キーまたは索引キーが多くても 1 つしかない、 単一の表をロードする場合は、データをキー順にソートし ます。(外部キーへの索引も可能です。) そのキーが索引キーの場合は、索引がどのように定義されたかによって、 データを昇順または降順にソートします。 キーが外部キーの場合は、データは昇順にソートし ます。NULL のキー値は、"高位"値として扱われます。
    • ロードする表が複数の場合は、次のいずれかの方法を選びます。
      • それぞれの表を個別にロードします。この方法を使用すると、前記のリスト項目で示した、単一表をロードする場合の規則に従うことができます。
      • LOAD ステートメントのそれぞれの INTO TABLE オプションの下の WHEN 文節を使用し、 入力データを表ごとにグループ化します。
      それぞれの表の中では、データをキー順にソートします。

    データを事前ソートした場合、LOAD ステートメントに PRESORTED YES オプションを指定してください。

    LOAD を実行する前にで説明されているとおりに、入力データのその他の前処理を行う。

  • 変換を回避する。
    • 可能であれば、整数から 10 進数、または 10 進数から浮動小数点などのデータ変換を避けるようにします。
    • 可能な場合は、ターゲット表と同じ CCSID を持つデータをロードすることで、CCSID およびエンコード・スキームの変換を回避してください。ロード対象の表の CCSID またはコード化スキームと一致しない CCSID またはコード化スキーム・オプションを指定すると、CCSID の変換が実行される可能性があります。
  • LOB および XML のマテリアライズを回避する: LOAD の実行中に大きい LOB または XML 文書を仮想ストレージ内にロードする必要を解消するために、以下のデータに対してファイル参照変数を使用します。
    • サイズが 32 KB より大きい XML データ。
    • 1 行に 1 つの LOB のみを含む大きい LOB データ。 (大きい LOB は、通常、2 MB 以上のサイズの LOB を指します。)

    これらのケースでは、LOAD は、LOB データや XML データをメモリーにマテリアライズしません。

  • 変更の始まり並列処理を使用する。 可能であれば LOAD が並列処理を使用できるようにして、大量のデータをロードする際に要する経過時間を削減します。 並列処理を使用可能にするには、以下のいずれかのアクションを実行します。
    • 表スペースが SIMPLE、セグメント化 (非ユニバーサル)、パーティション化 (非ユニバーサル)、または範囲パーティション化のいずれかであり、ロードされるすべてのデータが単一のデータ・セットに入っている場合は、PARALLEL キーワードを指定します。 このキーワードを使用すると、LOAD 時に複数の並列サブタスクを使用できます。PARALLEL キーワードに指定する並列処理の度合いを決める際には、並列処理の度合いを高くするとプロセッサー時間が長くなる可能性があることを考慮してください。推奨値は PARALLEL(0) または数値なしの PARALLEL を指定することです。こうすると Db2® が最適の並列処理の度合いを判別できます。
    • 表スペースがパーティション化されており、1 つ以上の非パーティション化副次索引が存在し、パーティションごとに別々の入力データ・セットがある場合は、パーティションの並列処理を使用します。パーティションの並列処理では、単一のジョブですべてのパーティションがロードされます。パーティションの並列処理を呼び出すには、パーティションごとに INDDN 仕様を使用して INTO TABLE PART 文節を指定します。

    並列処理を使用できない場合、別の方法としては、複数のジョブを使用して、個々のパーティションに対して LOAD を並行して実行します。この方式では、パーティションごとに別々の入力データ・セットも必要になります。

    並列処理を使用可能にする場合は、必要に応じて追加のリソースを割り当て、システムをチューニングすることにより、パフォーマンスの大幅な低下を回避してください。 特に、LOAD SHRLEVEL CHANGE または並列挿入を使用する場合 (とりわけ副次索引を使用する場合) に並列操作のメリットを活用するには、以下の処置を実行してください。

    • 大きなバッファー・プールを使い、バッファー・プールのヒット率を高める。
    • 据え置き書き出しのしきい値をより高く定義して、ディスクに書き出される ページ数を少なくする。これによって、入出力時間および競合を削減することができます。
    • チェックポイント間隔をより大きく定義して、ディスクに書き出される ページ数を少なくする。これによって、入出力時間と競合を削減することができます。
    • 副次索引データ・セットが入っている同一ボリュームへの 複数並行入出力をサポートする ESS Parallel Access Volume (PAV) を使用する。
    • 副次索引の各構成部分を使用して、複数の並行副次索引入出力をサポートする。
    変更の終わり
  • SORTKEYS を使用する。 SORTKEYS オプションを使用すると、索引キー・ソートのパフォーマンスが向上します。SORTKEYS を使用すると、 索引キーは作業ファイルに書き出されるのではなく、メモリーに渡されます。作業ファイルへのこの入出力を回避することにより、LOAD のパフォーマンスが改善されます。 また、LOAD に SORTKEYS を指定すると、特にソートするキー数の見積もりを与えた場合に、SYSUT1 および SORTOUT データ・セットのディスク・スペース所要量を削減することもできます。 SORTKEYS オプションによって、RELOAD フェーズの開始から BUILD フェーズの終了までの 経過時間が短縮されます。

    SORTKEYS オプション は、SHRLEVEL が NONE でない場合、または、SHRLEVEL が NONE であり、かつ、ターゲット表に 1 つ以上の索引がある 場合は、デフォルトとなります。

    SORTKEYS を使用すると、ソートするジョブのキー数の見積もりを指定できます。 見積もりが省略されているか、0 と指定されている場合、 LOAD は抽出したキーを作業データ・セットに書き込みます。そのため、SORTKEYS の使用によるパフォーマンス改善効果 は低下します。

    ソートすべきキー数を見積もるには、以下のようにします。

    1. 索引ごとに 1 をカウントします。
    2. 外部キーと索引の定義が同一でない場合には、それぞれの外部キーごとに 1 とカウントします。
    3. 外部キーと索引の定義が同一の場合には、それぞれの外部キーごとに次のようにカウントします。
      1. 外部キーが関与する最初の関係については 0 とカウントします。
      2. 外部キーが関与する後続の関係がある場合は、カウント 1 です。
    4. カウントされた数に、ロードされる行数を掛けます。

    複数の表がロードされる場合には、それぞれの表ごとに上記のステップを繰り返して、 その結果を合計します。

  • 索引を並列処理で作成する。 複数の索引が定義されている表スペースまたはパーティションに対する LOAD ジョブの経過時間を短縮するため、LOAD で並列処理によって索引を作成することができます。 LOAD のための並列索引作成を参照してください。
  • PREFORMAT を指定する。 PREFORMAT を指定すると、Db2 が実行時に表スペースの新規ページを事前フォーマット設定する必要がなくなります。

    Db2 の事前フォーマット設定は、遅延の原因になることがあり、多くの挿入操作を行うアプリケーションまたは SHRLEVEL CHANGE を指定した LOAD ジョブを実行するアプリケーションのパフォーマンスまたは実行時間の一貫性に影響を与えることがあります。このような遅延が発生する場合で、1 つのビジネス・プロセス・サイクルにおける表のサイズを予測できる場合は、LOAD PREFORMAT または REORG PREFORMAT の使用を検討してください。 この技法を使用する価値があるのは、Db2 の事前フォーマットが原因で、処理にかなりの遅延が発生する場合、あるいは INSERT 操作または LOAD RESUME YES SHRLEVEL CHANGE ジョブにおけるアプリケーションの経過時間に一貫性がなくなる場合だけです。

    推奨事項: LOAD PREFORMAT または REORG PREFORMAT の使用前と使用後のパフォーマンスを評価して、ご使用の環境でのこの技法の価値を定量化してください。

    PREFORMAT を使用すると、実行時間の遅延が解消されても、アプリケーションの実行前のセットアップ時間が増えることがあります。 この実行時間の改善には、LOAD または REORG の時間の増加というコストがかかります。その理由は、ロードまたは再編成されるデータと割り振り済み RBA の最高位置の間のすべてのページをユーティリティーが事前フォーマット設定する必要があるためです。 LOAD または REORG で必要となる追加の時間は、 事前フォーマット設定されるディスク・スペースの量によって異なります。 この事前フォーマット設定されたスペースを使用しているときに、Db2 が表スペースを拡張する必要が生じた場合は、通常のデータ・セットの拡張と事前フォーマット設定が行われます。

    次に挙げる状態の時に、LOAD SHRLEVEL CHANGE 処理または INSERT 処理のための事前フォーマット設定の使用を検討してください。

    • 多数の挿入が実行され、挿入されるデータ量が予測可能な表の場合。 この場合、必要なすべてのスペースをアプリケーションの実行前に事前割り振りすることができます。
    • 作業項目のリポジトリーとしての役割を果たす表において、作業項目がシステムに投入され、作業項目を処理するバックエンド・タスクにおいて後にその作業項目が使用される場合。
    • 最初は空の状態で始まり、多数の挿入操作によってデータが追加されてから照会アクセスが実行される表スペースの場合。

    表を読み取った結果が表スペース・スキャンとなる場合、挿入回数に対して読み取り回数の比率が高い表には LOAD PREFORMAT または REORG PREFORMAT はお勧めできません。このような場合に表スペースの事前フォーマット設定を行うと、その表スペースに含まれる表が照会処理によって使用される際に、余分な量の空ページを読み取る表スペース・スキャンが発生する場合があります。 この余分な読み取りのために、これらの照会の経過時間が増加することがあります。

    事前フォーマット設定された表スペースに対して挿入と非索引照会を混在させると、 照会のパフォーマンスに悪い影響を与える恐れがあり、それに見合うような挿入のパフォーマンス改善は得られません。 通常、PREFORMAT で良い結果が得られるのは、読み取り操作より挿入操作の比率が高い場合です。

    さらに、データ・セットに対する次のような PREFORMAT の影響も考慮に入れてください。

    • ユーザー管理のデータ・セットの場合、Db2 は、ユーティリティーの処理では、 データ・セットの削除または再割り振りは行いません。 このデータ・セットのサイズは、元のデータ・セットの 割り振りサイズに戻って小さくなるのではなく、同じサイズにとどまるか、あるいは 追加スペースまたはデータが追加された場合には大きくなります。この特性が意味を持つケースは、使用済み RBA (またはページ) の最高位置と割り振り済み RBA の最高位置の間に あるすべてのフリー・ページが事前フォーマット設定されるため、LOAD PREFORMAT または REORG PREFORMAT を使用する場合です。 この事前フォーマット設定には、既に割り振られている 2 次エクステントも含まれます。
    • Db2 管理のデータ・セットの場合、LOAD または REORG ジョブで REPLACE を 指定すると、Db2 はそのデータ・セットを削除し、再割り振りを行います。 この動作の結果、データ・セットのサイズは元の割り振りサイズにサイズ変更されます。再ロードされるデータのサイズが 1 次割り振りのサイズを満たさず、2 次割り振りが強制される場合、データ・セットのサイズは元のままになります。 したがって、Db2 管理対象データに対する LOAD PREFORMAT または REORG PREFORMAT では、データが表スペースに再ロードされた後、少なくともデータ・セットの 1 次割り振り量全体が事前フォーマット設定されます。
    • ユーザー管理および Db2 管理いずれのデータ・セットの場合も、ユーティリティーの処理中にデータ・セットが 2 次エクステントまで進んだ場合は、割り振り済み RBA の最高位置が 2 次エクステントの最後となります。 その位置の値が、事前フォーマット設定の高い値になります。