でのデータ重複排除 Query Service

Adobe Experience Platform Query Service は、データの重複排除をサポートします。 データの重複排除は、行内のデータの一部のみが重複した情報なので、行全体を計算から削除する必要がある場合や、特定のフィールドのセットを無視する場合に実行できます。

重複排除は、通常、 ROW_NUMBER() 関数は、注文時間の ID（または ID の組み合わせ）のウィンドウをまたいで機能します。この関数は、重複が検出された回数を表す新しいフィールドを返します。 時間は、多くの場合、 Experience Data Model (XDM) timestamp フィールドに入力します。

When the value of ROW_NUMBER() が 1の場合は、元のインスタンスを参照します。 一般に、使用したいインスタンスがこのインスタンスになります。 多くの場合、集計カウントの実行など、上位の SELECT で重複排除が実行されるサブ選択内でおこなわれます。

重複排除の使用例は、グローバルにすることも、単一のユーザーに制限することも、 identityMap.

このドキュメントでは、次の 3 つの一般的な使用例に対して重複排除を実行する方法について説明します。エクスペリエンスのイベント、購入および指標。

各例には、範囲、ウィンドウキー、重複排除メソッドの概要、および完全な SQL クエリが含まれます。

エクスペリエンスイベント

エクスペリエンスイベントが重複している場合は、行全体を無視する可能性が高くなります。

範囲：​グローバル

ウィンドウキー： id

重複排除の例

SELECT *,
  ROW_NUMBER()
    OVER (PARTITION BY id
          ORDER BY timestamp ASC
    ) AS id_dup_num
FROM experience_events

完全な例

SELECT COUNT(*) AS num_events FROM (
  SELECT *,
    ROW_NUMBER()
      OVER (PARTITION BY id
            ORDER BY timestamp ASC
      ) AS id_dup_num
  FROM experience_events
) WHERE id_dup_num = 1

購入

重複の購入がある場合は、 Experience Event 行に含めるが、購入に関連付けられたフィールド ( commerce.orders 指標 ) を参照してください。 購入には、購入 ID 用の特別なフィールド ( commerce.order.purchaseID.

次を使用することをお勧めします。 purchaseID は XDM 内の購入 ID の標準のセマンティックフィールドなので、訪問者の範囲内で使用します。 重複する購入データは、クエリの方がグローバルスコープを使用するよりも速く、複数の訪問者 ID をまたいで購入 ID が重複する可能性は低いので、訪問者の範囲は削除する場合に推奨されます。

範囲：​訪問者

ウィンドウキー： identityMap[$NAMESPACE].id & commerce.order.purchaseID

重複排除の例

SELECT *,
  IF(LENGTH(commerce.`order`.purchaseID) > 0,
    ROW_NUMBER()
      OVER (PARTITION BY identityMap['ECID'].id, commerce.`order`.purchaseID
            ORDER BY timestamp ASC
      ),
    1) AS purchaseID_dup_num
FROM experience_events

完全な例

次の例では、条件句を使用して、購入 ID が存在しない場合にイベント ID を使用します。

SELECT SUM(commerce.purchases.value) AS num_purchases FROM (
  SELECT *,
    ROW_NUMBER()
      OVER (PARTITION BY id
            ORDER BY timestamp ASC
      ) AS id_dup_num,
    IF(LENGTH(commerce.`order`.purchaseID) > 0,
      ROW_NUMBER()
        OVER (PARTITION BY identityMap['ECID'].id, commerce.order.purchaseID
              ORDER BY timestamp ASC
        ),
      1) AS purchaseID_dup_num
  FROM experience_events
) WHERE id_dup_num = 1 AND purchaseID_dup_num = 1

指標

オプションの一意の ID を使用する指標があり、その ID の重複が表示される場合は、その指標値を無視して、残りのエクスペリエンスイベントを保持する必要が生じます。

XDM では、ほとんどすべての指標で、重複排除に使用できるオプションの Measure フィールドを含む id データ型を使用します。

範囲：​訪問者

ウィンドウキー： identityMap[$NAMESPACE].id および測定オブジェクトの ID

重複排除の例

SELECT *,
  IF(LENGTH(application.launches.id) > 0,
    ROW_NUMBER()
      OVER (PARTITION BY identityMap['ECID'].id, application.launches.id
            ORDER BY timestamp ASC
      ),
    1) AS launchesID_dup_num
FROM experience_events

完全な例

SELECT SUM(application.launches.value) AS num_launches FROM (
  SELECT *,
    ROW_NUMBER()
      OVER (PARTITION BY id
            ORDER BY timestamp ASC
      ) AS id_dup_num,
    IF(LENGTH(application.launches.id) > 0,
      ROW_NUMBER()
        OVER (PARTITION BY identityMap['ECID'].id, application.launches.id
              ORDER BY timestamp ASC
        ),
      1) AS launchesID_dup_num
  FROM experience_events
) WHERE id_dup_num = 1 AND launchesID_dup_num = 1

次の手順

このドキュメントでは、クエリサービス内でデータの重複排除を実行する方法と、データの重複排除の例について説明しました。 クエリサービスを使用してクエリを記述する際のベストプラクティスについては、 クエリガイドの記述.

Business.Adobe.com リソース