Log Processing Mode.cfg

最終更新日: 2022-10-05
  • 作成対象:
  • User
    Admin
重要

Data Workbench 提供終了のお知らせ.

設定ファイル Log Processing Mode.cfg では、データセットに組み入れるデータの処理を一時停止したり、オフラインソースを指定したりすることができます。Data Workbench サーバーの状態ファイルが保存される頻度を指定することもできます。

ソースの追加と削除を含め、Log Processing Mode.cfg ファイルに変更を加えても、データの再処理は行われません。

データセットプロファイルの Log Processing Mode.cfg ファイルを編集するには

  1. データセットプロファイル内で、 Profile Manager をクリックし、 Dataset 内容を表示する。

    メモ

    この Log Processing Mode.cfg ファイルが目的のプロファイルのディレクトリにない場合は、このファイルを data workbench サーバーマシン上の Base ディレクトリからプロファイルのディレクトリにコピーする必要があります。

    を開き、使用する方法については、 Profile Manager, 参照 Data Workbenchユーザーガイド.

  2. 設定ファイル名の横のチェックマークを右クリックし、 Make Local. このファイル用のチェックマークが User 列に表示されます。

  3. 新しく作成されたチェックマークを右クリックし、 Open > from the workbench. 設定ウィンドウが表示されます。

  4. 次の表を参考にして、設定ファイルのパラメーターを編集します。

    メモ

    の一部のパラメーター Log Processing Mode.cfg ファイルには以下を含む名前が付けられています Fast Input または Fast Merge. Fast Input は、データセット構築のログ処理段階を指し、データセットの処理にかかる合計時間の約半分を占めます。Fast Merge は、データセット構築の変換段階を指します。先行するログ処理があって初めて使用されます。Fast Merge 変更による再変換中には発生しない Transformation Dataset Configuration ファイル。 次に類似 Fast Input, Fast Merge また、は、データセットの処理時間の約半分を占めます。

    パラメーター 説明
    Cloud Bytes

    データ変換の効率に関係するチューニングパラメーター。デフォルト値は 128000000 です。

    注意:変更が必要な場合は必ずアドビまでご相談ください。

    Fast Input Decision Ratio

    データの処理をリアルタイムモードから Fast Input モード(その後 Fast Merge モード)に移行するタイミングを、ログの総バイト数と未読バイト数の比で指定するチューニングパラメーター。

    デフォルト値は 200 です。この場合、未読ログデータが総データの 1/200 に達すると、システムがリアルタイムモードから Fast Input モードに移行します。Decision Ratio を大きくすると、Fast Input モードに移行しやすくなり、小さくすると、Fast Input モードに移行しづらくなります。

    注意:このパラメーターを 0 に設定すると、初回処理も含め一切 Fast Input モードに移行しなくなります。このパラメーターを 1.1 に設定すると、初回処理時には Fast Input に移行しますが、その後の処理では移行しません。0 ~ 1.1 の値は推奨されません。このパラメーターの設定について詳しくは、アドビにお問い合わせください。

    Fast Input FIFO Bytes

    データ処理時におけるメモリ使用量とシステムパフォーマンス間のバランスを調整するチューニングパラメーター。デフォルト値は 120000000 です。

    注意:変更が必要な場合は必ずアドビまでご相談ください。

    Fast Merge Buffer Bytes

    データ処理時におけるメモリ使用量とシステムパフォーマンス間のバランスを調整するチューニングパラメーター。デフォルト値は 128000000 です。

    注意:変更が必要な場合は必ずアドビまでご相談ください。

    Offline Sources

    オフラインログソースのマスク。

    オフラインソースを指定するには

    • Offline Sources を右クリックし、新規追加Source をクリックします。
    • 新しいソースのパラメーターに、ログシーケンスのマスクを入力します。ファイル名が YYYYMMDD-SENSORID.vsl 形式の Sensor ログソースの場合、マスクは SENSORID です。SENSORID の大文字と小文字は区別されます。ログファイルログソースの場合、Mask Pattern によって抽出された文字列がマスクになります。詳しくは、 ログファイル.

    Offline Sources に属しているソースは、追加したり削除したりしても、データセットの再処理は実行されません。

    基準日時の測定は、プロファイルのオンラインソースの処理に対して維持されます。オフラインソースが再びオンラインになると、そのソースから送られてくるログファイルの処理が再開されます。

    ソースがオンラインに戻ったらすぐに、Offline Sources からそのソースを削除する必要があります。削除しなかった場合、Data Workbench サーバーは、ソースからデータが送信されている限り、そのソースをオンラインソースとして処理し、基準日時を更新します。そのソースが再度オフラインになった場合、基準日時の測定が停止します。

    Paused true または false。true の場合、新しいデータは処理されず、データセットに追加されません。デフォルト値は false です。
    Real Time Delay データセットに組み入れるデータを Data Workbench サーバーが処理する際の、データ間の待機時間(秒数)。この値をゼロに設定すると、到着したデータが、可能な限りリアルタイムで処理されます。デフォルト値はゼロ(0)ですが、この値を増やすことで、CPU にかかる負荷を抑えることができます。
    Real Time FIFO Bytes

    データセットへの組み入れ処理を待つデータを蓄えておくためのメモリの量(バイト)。Real Time Delay に指定した秒数に応じて変更が必要となる場合があります。デフォルト値は 16000000 です。

    注意:変更が必要な場合は必ずアドビまでご相談ください。

    Save Interval (sec)

    Data Workbench サーバーでその状態ファイルが保存される頻度。デフォルト値は 3600 です。

    注意:変更が必要な場合は必ずアドビまでご相談ください。

    Data Workbench ウィンドウ内で Log Processing Mode.cfg ファイルを編集するときは、基本的な編集機能にショートカットキーを使用できます。切り取り(Ctrl + X)、コピー(Ctrl + C)、貼り付け(Ctrl + V)、取り消し(Ctrl + Z)、やり直し(Ctrl + Shift + Z)、セクション選択(クリックしながらドラッグ)、すべて選択(Ctrl + A)などの操作が可能です。また、ショートカットを使用して、1 つの設定ファイル ( .cfg) を別のに置き換えます。

  5. 右クリック (modified) ウィンドウの上部にあるをクリックし、 Save.

  6. 内 Profile Managerをクリックし、 User 列、「 Save to > datasetprofile name.

    メモ

    アドビから提供される内部プロファイルには、変更した設定ファイルを一切保存しないでください。内部プロファイルに対するアップデートをインストールするときに変更内容が上書きされます。

このページ