AdobeManaged Services Dispatcher のフラッシュ

説明 description

環境
Experience Manager

問題/症状
このドキュメントでは、フラッシュの発生方法に関するガイダンスを提供し、キャッシュのフラッシュと無効化を実行するメカニズムについて説明します。

仕組み
操作の順序

一般的なワークフローは、コンテンツ作成者がページをアクティベートする際に最適です。パブリッシャーは、新しいコンテンツを受け取る際に、次の図に示すように、Dispatcher に対してフラッシュリクエストをトリガーします。
作成者は、コンテンツをアクティベートし、トリガーパブリッシャーは、dispatcher にフラッシュする要求を送信します。
この一連のイベントは、新規または変更されたアイテムのみをフラッシュすることを強調します。  これにより、変更がパブリッシャーから取得される前にフラッシュが発生する競合状態を避けるために、キャッシュをクリアする前にパブリッシャーがコンテンツを受け取るようになります。

レプリケーションエージェント

オーサー環境には、何かがアクティブ化されると、そのファイルとそのすべての依存関係をパブリッシャーに送信するトリガーが発行者を指すように設定されたレプリケーションエージェントがあります。

パブリッシャーはファイルを受け取ると、受信時イベントにトリガーを置くように Dispatcher を指すように設定されたレプリケーションエージェントを持ちます。  次に、フラッシュリクエストがシリアル化され、Dispatcher に送信されます。

オーサーレプリケーションエージェント

次に、設定済みの標準レプリケーションエージェントのスクリーンショットの例を示します
AEM web ページ/etc/replication.htmlからの標準レプリケーションエージェントのスクリーンショット
通常、作成者に対して、コンテンツのレプリケート先のパブリッシャーごとに 1 つまたは 2 つのレプリケーションエージェントが設定されます。

1 つ目は、コンテンツのアクティベーションをプッシュする標準レプリケーションエージェントです。

2 つ目はリバースエージェントです。  これはオプションで、各パブリッシャーのアウトボックスで、リバースレプリケーションアクティビティとしてオーサーに取り込む新しいコンテンツがあるかどうかを確認するために設定されます

パブリッシャーレプリケーションエージェント

次に、設定済みの標準フラッシュレプリケーションエージェントのスクリーンショットの例を示します
AEM web ページ/etc/replication.htmlからの標準フラッシュレプリケーションエージェントのスクリーンショット
仮想ホストを受け取る DISPATCHER フラッシュレプリケーション

Dispatcher モジュールは、特定のヘッダーを探して、POSTリクエストがAEMレンダーに渡すものか、またはフラッシュリクエストとしてシリアル化され、Dispatcher ハンドラー自体で処理する必要があるかを知ります。  次に、これらの値を示す設定ページのスクリーンショットを示します。
シリアル化の種類が Dispatcher フラッシュと表示されるメインの設定画面の「設定」タブの画像
デフォルト設定ページには、  シリアル化の種類  as  Dispatcher フラッシュ  エラーレベルを設定します。
レプリケーションエージェントのトランスポートタブのスクリーンショット。 これは、フラッシュリクエストを投稿する URI を示します。 /dispatcher/invalidate.cache
トランスポートタブでは、フラッシュリクエストを受信する Dispatcher の IP アドレスを示すように URI が設定されているのがわかります。  パス/dispatcher/invalidate.cacheは、モジュールがフラッシュであるかどうかを判別する方法ではありません。フラッシュリクエストであることを知るために、アクセスログに表示される明白なエンドポイントに過ぎません。  「拡張」タブで、Dispatcher モジュールに対するフラッシュリクエストであると見なすために、存在する項目を調べます。
レプリケーションエージェントの「拡張」タブのスクリーンショット。 Dispatcher にフラッシュを指示するために送信されたPOSTリクエストで送信されるヘッダーに注意します。
フラッシュリクエストの HTTP メソッドは、次に示す特別なリクエストヘッダーを持つGETリクエストに過ぎません。

  • CQ-Action

    • リクエストに基づくAEM 変数を使用します。値は通常、アクティベートまたは削除 ​です。
  • CQ-Handle

    • リクエストに基づいてAEM変数を使用します。値は通常、フラッシュされた項目のフルパスです(例: )  /content/dam/logo.jpg
  • CQ-Path

    • リクエストに基づいてAEM変数を使用します。値は通常、フラッシュされる項目の完全パスです(例: )  /content/dam
  • ホスト

    • ここで、Dispatcher の Apache Web サーバー (https://experienceleague.adobe.com/etc/httpd/conf.d/enabled_vhosts/aem_flush.vhost?lang=ja) 上で設定されている特定の VirtualHost をターゲットにするように、ホストヘッダーがスプーフィングされます。  これは、aem_flush.vhost ファイルのエントリに一致するハードコードされた値です。  ServerName  または  ServerAlias

オーサーパブリッシュコンテンツからレプリケーションイベントから新しい項目が受け取られたときに、react とトリガーを持つレプリケーションエージェントが受け取ったことを示す標準レプリケーションエージェントの画面 「トリガー」タブで、使用する切り替え済みのトリガーと、その内容をメモします。

  • デフォルトを無視
    • これを有効にすると、ページのアクティベーション時にレプリケーションエージェントがトリガーされなくなります。これは、オーサーインスタンスがページに変更を加えた場合にフラッシュがトリガーするものです。これはパブリッシャーなので、このタイプのイベントはトリガーしたくありません。
  • 受信時
    • 新しいファイルを受け取ったら、フラッシュをトリガーします。  したがって、作成者が更新されたファイルを送信すると、トリガーを設定し、フラッシュリクエストを Dispatcher に送信します。
  • バージョン管理なし
    • 新しいファイルを受け取ったので、パブリッシャーが新しいバージョンを生成しないように、これをチェックします。ファイルを置き換え、パブリッシャーではなくオーサーのバージョン管理を信頼します。

次に、一般的なフラッシュリクエストが curl コマンドの形式でどのように表示されるかを見てみましょう

$ curl \ -H "CQ-Action: Activate" \ -H "CQ-Handle: /content/dam/logo.jpg" \ -H "CQ-Path: /content/dam/" \ -H "Content-Length: 0" \ -H "Content-Type: application/octect-stream" \ -H "Host: flush" \ http: //10 .43.0.32:80 /dispatcher/invalidate .cache

このフラッシュの例では、/content/dam パスをフラッシュして、そのディレクトリ内の.stat ファイルを更新します。

.stat ファイル

フラッシュメカニズムは本質的にシンプルで、  .stat  キャッシュファイルが作成されるドキュメントルートに生成されるファイル。

.vhost ファイルと_farm.any ファイル内で、ドキュメントルートディレクティブを設定して、キャッシュの場所と、エンドユーザーからの要求が来たときのファイルの保存場所/提供場所を指定します。

Dispatcher サーバーで次のコマンドを実行する場合は、.stat ファイルの検索を開始します。

1
$ find /mnt/var/www/html/ - type f -name ".stat"

キャッシュに項目があり、Dispatcher モジュールによってフラッシュリクエストが送信されて処理された場合、このファイル構造はどのように見えるかを図で示します
コンテンツと日付が混在した statfiles と、stat レベルで表示された stat ファイル
STAT ファイルのレベル

各ディレクトリには.stat ファイルが存在することに注意してください。これは、フラッシュが発生したことを示すインジケーターです。  上記の例では、  statfilelevel  設定が次のように設定されています:  3  対応するファーム設定ファイル内にあります。

statfilelevel 設定は、モジュールが.stat ファイルをトラバースして更新するフォルダーの深さを示します。  .stat ファイルが空の場合は、データスタンプを含むファイル名に過ぎず、手動で作成することもできますが、Dispatcher サーバーのコマンドラインで touch コマンドを実行します。

stat ファイルレベルの設定が高すぎると、各フラッシュリクエストが stat ファイルにタッチしているディレクトリツリーをトラバースします。  これは、大きなキャッシュツリーで大きなパフォーマンスヒットになる可能性があり、Dispatcher の全体的なパフォーマンスに影響を与える可能性があります。

このファイルレベルの設定が低すぎると、フラッシュリクエストが意図した以上にクリアされる可能性があります。これにより、キャッシュから提供されるリクエストが少なくなり、キャッシュがより頻繁にチャーンし、パフォーマンスの問題が発生する可能性があります。

メモ:

statfilelevel を適切なレベルに設定します。フォルダー構造を見て、多くのディレクトリをトラバースする必要がなく、簡潔なフラッシュができるように設定されていることを確認します。システムのパフォーマンステスト中にテストして、ニーズに合っていることを確認します。

言語をサポートしているサイトが良い例です。一般的なコンテンツツリーには、次のディレクトリがあります。

/content/brand1/en/us/

この例では、stat ファイルレベル設定の 4 を使用します。  これにより、  us  フォルダー内の言語フォルダーもフラッシュされません。

STAT ファイルのタイムスタンプハンドシェイク

コンテンツのリクエストが同じルーチンで発生した場合

  1. .stat ファイルのタイムスタンプが、要求されたファイルのタイムスタンプと比較されます
  2. .stat ファイルが要求されたファイルより新しい場合は、キャッシュされたコンテンツを削除し、AEMから新しいコンテンツを取得してキャッシュします。次に、コンテンツが提供されます
  3. .stat ファイルが要求されたファイルより古い場合は、そのファイルが新しいことがわかり、コンテンツを提供できます。

キャッシュハンドシェイク — 例 1

上記の例では、コンテンツ/content/index.htmlのリクエストを実行します。

index.html ファイルの時刻は2019-11-01 @ 6:21PM です。

最も近い.stat ファイルの時刻は2019-11-01 @ 12:22PM です。

上記の内容を理解すると、インデックスファイルが.stat ファイルより新しく、要求したエンドユーザーにキャッシュから提供されることがわかります。

キャッシュハンドシェイク — 例 2

上記の例では、コンテンツ/content/dam/logo.jpgのリクエストを実行します。

logo.jpg ファイルの時刻は2019-10-31 @ 1:13PM です。

最も近い.stat ファイルの時刻は2019-11-01 @ 12:22PM です。

この例に示すように、ファイルは.stat ファイルより古く、削除され、AEMから新しく取り出されてキャッシュ内に置き換えられ、要求したエンドユーザーに提供されます。

ファームファイル設定

設定オプションの完全なセットについては、ドキュメントを参照してください。 https://docs.adobe.com/content/help/ja-JP/experience-manager-dispatcher/using/configuring/dispatcher-configuration.html#configuring-dispatcher_configuring-the-dispatcher-cache-cache

キャッシュのフラッシュに関係する、いくつかの要素を強調したいと思います

ドキュメントルート

この設定エントリは、ファームファイルの次のセクションにあります。

/myfarm {      /cache {          /docroot

Dispatcher を設定し、キャッシュディレクトリとして管理するディレクトリを指定します。

メモ:

このディレクトリは、Web サーバーが使用するように設定されているドメインの Apache ドキュメントのルート設定と一致する必要があります。

Apache ドキュメントルートのサブフォルダーにある各ファームごとにネストされた docroot フォルダーを持つことは、多くの理由で非常に困難な考えです。

Stat Files Level

この設定エントリは、ファームファイルの次のセクションにあります。

/myfarm {      /cache {          /statfileslevel


この設定は、フラッシュリクエストが発生したときに.stat ファイルを生成する必要がある深さを測定します。

/statfileslevel が次の番号に設定され、ドキュメントのルートが/var/www/html/の場合、/content/dam/brand1/en/us/logo.jpgをフラッシュすると次の結果が得られます。

  • 0 - 次の統計ファイルが作成されます

    • /var/www/html/.stat
  • 1 - 次の統計ファイルが作成されます

    • /var/www/html/.stat
    • /var/www/html/content/.stat
  • 2 - 次の統計ファイルが作成されます

    • /var/www/html/.stat
    • /var/www/html/content/.stat
    • /var/www/html/content/dam/.stat
  • 3 - 次の統計ファイルが作成されます

    • /var/www/html/.stat
    • /var/www/html/content/.stat
    • /var/www/html/content/dam/.stat
    • /var/www/html/content/dam/brand1/.stat
  • 4 - 次の統計ファイルが作成されます

    • /var/www/html/.stat
    • /var/www/html/content/.stat
    • /var/www/html/content/dam/.stat
    • /var/www/html/content/dam/brand1/.stat
    • /var/www/html/content/dam/brand1/en/.stat
  • 5 - 次の統計ファイルが作成されます

    • /var/www/html/.stat
    • /var/www/html/content/.stat
    • /var/www/html/content/dam/.stat
    • /var/www/html/content/dam/brand1/.stat
    • /var/www/html/content/damn/brand1/en/.stat
    • /var/www/html/content/damn/brand1/en/us/.stat

メモ:

タイムスタンプのハンドシェイクが発生すると、最も近い.stat ファイルが検索されることに注意してください。

.stat ファイルのレベルが 0 で、stat ファイルが/var/www/html/.stat にある場合は、/var/www/html/content/dam/brand1/en/us/の下にあるコンテンツは、最も近い.stat ファイルを探し、5 つ上のフォルダを探して、レベル 0 に存在する唯一の.stat ファイルを見つけ、それと日付を比較します。つまり、この高いレベルで 1 回フラッシュすると、キャッシュされたすべてのアイテムが基本的に無効化されます。

無効化を許可

この設定エントリは、ファームファイルの次のセクションにあります。

/myfarm {      /cache {          /allowedClients {

この設定内に、フラッシュリクエストを送信できる IP アドレスのリストを配置します。  フラッシュ要求が Dispatcher に含まれる場合、信頼された IP からの要求が必要です。  この誤った設定が行われているか、信頼されていない IP アドレスからフラッシュリクエストを送信した場合は、ログファイルに次のエラーが表示されます。

Mon Nov 11 22:43:05 2019 W pid 3079 (tid 139859875088128) Flushing rejected from 10.43.0.57

無効化ルール

この設定エントリは、ファームファイルの次のセクションにあります。

/myfarm {      /cache {          /invalidate {

これらのルールは通常、フラッシュリクエストで無効化できるファイルを示します。

ページのアクティベーションによって重要なファイルが無効化されるのを防ぐために、無効化できるファイルと手動で無効化する必要のあるファイルを指定するルールを適用できます。  次に、html ファイルの無効化のみを許可する設定のサンプルセットを示します。

/invalidate {     /0000 { /glob "*" /type "deny" }     /0001 { /glob "*.html" /type "allow" } }

解決策 resolution

テスト/トラブルシューティング

ページをアクティベートし、ページのアクティベートが成功したことを示す緑色の光が表示されたら、アクティベートしたコンテンツがキャッシュからもフラッシュされます。

ページを更新すると、古いものが表示され、緑の光が点灯します。

フラッシュプロセスを手動でいくつか実行し、何が間違っているのかを確認してみましょう。パブリッシャーのシェルから、curl を使用して次のフラッシュリクエストを実行します。

$ curl -H "CQ-Action: Activate" \ -H "CQ-Handle: /content/PATH TO ITEM TO FLUSH" \ -H "CQ-Path: /content/PATH TO ITEM TO FLUSH" \ -H "Content-Length: 0" -H "Content-Type: application/octet-stream" \ -H "Host: flush" \ http: // DISPATCHER IP ADDRESS /dispatcher/invalidate .cache

テストフラッシュリクエストの例

$ curl -H "CQ-Action: Activate" \ -H "CQ-Handle: /content/customer/en-us" \ -H "CQ-Path: /content/customer/en-us" \ -H "Content-Length: 0" -H "Content-Type: application/octet-stream" \ -H "Host: flush" \ http: //169 .254.196.222 /dispatcher/invalidate .cache

Dispatcher に対するリクエストコマンドを実行したら、ログでの処理と.stat ファイルでの処理を確認します。  ログファイルの末尾に、次のエントリが表示され、フラッシュリクエストが Dispatcher モジュールにヒットしたことを確認できます

Wed Nov 13 16:54:12 2019 I pid 19173:tid 140542721578752 Activation detected: action=Activate /content/dam/logo.jpg Wed Nov 13 16:54:12 2019 I pid 19173:tid 140542721578752 Touched /mnt/var/www/html/.stat Wed Nov 13 16:54:12 2019 I pid 19173:tid 140542721578752 Touched /mnt/var/www/html/content/.stat Wed Nov 13 16:54:12 2019 I pid 19173:tid 140542721578752 Touched /mnt/var/www/html/content/dam/.stat Wed Nov 13 16:54:12 2019 I pid 19173:tid 140542721578752 "GET /dispatcher/invalidate.cache" 200 purge publishfarm/- 0ms

モジュールが取得され、フラッシュリクエストを確認したので、モジュールが.stat ファイルにどのような影響を与えたかを確認する必要があります。  次のコマンドを実行し、別のフラッシュを実行する際にタイムスタンプの更新を確認します。

| $ watch -n 3 "find /mnt/var/www/html/ -type f -name " .stat " | xargs ls -la $1" |
| — |

コマンド出力からわかるように、現在の.stat ファイルのタイムスタンプが表示されます。

-rw-r--r--. 1 apache apache 0 Nov 13 16:54 /mnt/var/www/html/content/dam/ .stat -rw-r--r--. 1 apache apache 0 Nov 13 16:54 /mnt/var/www/html/content/ .stat -rw-r--r--. 1 apache apache 0 Nov 13 16:54 /mnt/var/www/html/ .stat

フラッシュを再度実行した場合は、タイムスタンプの更新を確認してください。

-rw-r--r--. 1 apache apache 0 Nov 13 17:17 /mnt/var/www/html/content/dam/ .stat -rw-r--r--. 1 apache apache 0 Nov 13 17:17 /mnt/var/www/html/content/ .stat -rw-r--r--. 1 apache apache 0 Nov 13 17:17 /mnt/var/www/html/ .stat

コンテンツのタイムスタンプを.stat ファイルのタイムスタンプと比較してみましょう

$ stat /mnt/var/www/html/content/customer/en-us/ .stat    File: .stat'  サイズ: 0 ブロック: 0 IO ブロック: 4096 通常空fileデバイス:ca90h/51856d`    `Inode: 17154125    Links: 1アクセス: (0644)/-rw-r--r--) Uid: ( 48/ apache) Gid: ( 48/ apache)Access: 2019-11-13 16:22:31.000000000 -0400修正: 2019-11-13 16:22:31.000000000 -0400Change: 2019-11-13 16:22:31.000000000 -0400`<br> <br>`$ stat/mnt/var/www/html/content/customer/en-us/logo.jpgファイル: logo.jpg'    Size: 15856           Blocks: 32          IO Block: 4096   regular file Device: ca90h /51856d    Inode: 9175290    Links: 1 Access: (0644 /-rw-r--r-- )  Uid: (   48/  apache)   Gid: (   48/  apache) Access: 2019-11-11 22:41:59.642450601 +0000 Modify: 2019-11-11 22:41:59.642450601 +0000 Change: 2019-11-11 22:41:59.642450601 +0000

タイムスタンプのいずれかを見ると、コンテンツは.stat ファイルより新しい時刻を持っていることに気が付くでしょう。これは、 .stat ファイルより新しいので、キャッシュからファイルを提供するようモジュールに指示します。

明らかに、このファイルのタイムスタンプは更新されており、「フラッシュ」または置き換えの条件を満たしていません。

recommendation-more-help
3d58f420-19b5-47a0-a122-5c9dab55ec7f