クエリサービスでのAdobe定義のSQL関数
Adobeで定義された関数(ADFと呼ばれます)は、Adobe Experience Platform Query Serviceの事前定義済みの関数で、Experience Event個のデータに対して一般的なビジネス関連タスクを実行するのに役立ちます。 これらは、 セッション化および アトリビューション の関数を、Adobe Analyticsで見つかったものと同様に含みます。
このドキュメントでは、Query Serviceで利用できるAdobe定義の関数について説明します。
窓関数 window-functions
ビジネスロジックの大部分は、顧客のタッチポイントを収集し、時間順に並べる必要があります。このサポートは、ウィンドウ関数の形式でSpark SQLによって提供されます。 窓関数は標準 SQL の一部で、他の多くの SQL エンジンでサポートされています。
窓関数は、集計を更新し、順序付けられたサブセットの各行の 1 つの項目を返します。最も基本的な集計関数は SUM() です。SUM() は行を取得し、合計 1 つを提供します。代わりに SUM() をウィンドウに適用して、窓関数に変換すると、各行の累積合計が返されます。
Spark SQL ヘルパーの大部分は、ウィンドウ内の各行を更新し、その行の状態を追加するウィンドウ関数です。
クエリ構文
OVER ({PARTITION} {ORDER} {FRAME})
{PARTITION}PARTITION BY endUserIds._experience.mcid.id{ORDER}ORDER BY timestamp{FRAME}ROWS BETWEEN UNBOUNDED PRECEDING AND CURRENT ROWセッション化
Web サイト、モバイルアプリケーション、インタラクティブ音声応答システム、またはその他の顧客インタラクションチャネルから送信されるExperience Event データを操作する場合、関連するアクティビティの期間を中心にイベントをグループ化できるかどうかを確認できます。 通常、製品調査、請求書の支払い、アカウント残高の確認、申請の入力など、特定の意図にもとづいてアクティビティを推進します。
データをグループ化して分類することで、イベントを関連付けて、顧客体験に関する詳細なコンテキストを明らかにできます。
Adobe Analyticsでのセッション化について詳しくは、 コンテキスト対応セッション のドキュメントを参照してください。
クエリ構文
SESS_TIMEOUT({TIMESTAMP}, {EXPIRATION_IN_SECONDS}) OVER ({PARTITION} {ORDER} {FRAME})
{TIMESTAMP}{EXPIRATION_IN_SECONDS}OVER()関数内のパラメーターの説明については、 ウィンドウ関数セクション を参照してください。
クエリの例
SELECT
endUserIds._experience.mcid.id as id,
timestamp,
SESS_TIMEOUT(timestamp, 60 * 30)
OVER (PARTITION BY endUserIds._experience.mcid.id
ORDER BY timestamp
ROWS BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW)
AS session
FROM experience_events
ORDER BY id, timestamp ASC
LIMIT 10
結果
id | timestamp | session
|----------------------------------+-----------------------+--------------------
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:55:53.0 | (0,1,true,1)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:56:51.0 | (58,1,false,2)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:57:47.0 | (56,1,false,3)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:58:27.0 | (40,1,false,4)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:59:22.0 | (55,1,false,5)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:16:23.0 | (1361821,2,true,1)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:17:17.0 | (54,2,false,2)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:18:06.0 | (49,2,false,3)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:18:39.0 | (33,2,false,4)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:19:10.0 | (31,2,false,5)
(10 rows)
指定されたサンプルクエリの場合、結果はsession列に表示されます。 session列は、次のコンポーネントで構成されています。
({TIMESTAMP_DIFF}, {NUM}, {IS_NEW}, {DEPTH})
{TIMESTAMP_DIFF}{NUM}PARTITION BYで定義されたキーに対して、1から始まる一意のセッション番号。{IS_NEW}{DEPTH}SESS_START_IF
このクエリは、現在のタイムスタンプと指定された式に基づいて、現在の行のセッションの状態を返し、現在の行で新しいセッションを開始します。
クエリ構文
SESS_START_IF({TIMESTAMP}, {TEST_EXPRESSION}) OVER ({PARTITION} {ORDER} {FRAME})
{TIMESTAMP}{TEST_EXPRESSION}application.launches > 0OVER()関数内のパラメーターの説明については、 ウィンドウ関数セクション を参照してください。
クエリの例
SELECT
endUserIds._experience.mcid.id AS id,
timestamp,
IF(application.launches.value > 0, true, false) AS isLaunch,
SESS_START_IF(timestamp, application.launches.value > 0)
OVER (PARTITION BY endUserIds._experience.mcid.id
ORDER BY timestamp
ROWS BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW)
AS session
FROM experience_events
ORDER BY id, timestamp ASC
LIMIT 10
結果
id | timestamp | isLaunch | session
|----------------------------------+-----------------------+----------+--------------------
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:55:53.0 | true | (0,1,true,1)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:56:51.0 | false | (58,1,false,2)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:57:47.0 | false | (56,1,false,3)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:58:27.0 | true | (40,2,true,1)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:59:22.0 | false | (55,2,false,2)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:16:23.0 | false | (1361821,2,false,3)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:17:17.0 | false | (54,2,false,4)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:18:06.0 | false | (49,2,false,5)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:18:39.0 | false | (33,2,false,6)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:19:10.0 | false | (31,2,false,7)
(10 rows)
指定されたサンプルクエリの場合、結果はsession列に表示されます。 session列は、次のコンポーネントで構成されています。
({TIMESTAMP_DIFF}, {NUM}, {IS_NEW}, {DEPTH})
{TIMESTAMP_DIFF}{NUM}PARTITION BYで定義されたキーに対して、1から始まる一意のセッション番号。{IS_NEW}{DEPTH}SESS_END_IF
このクエリは、現在のタイムスタンプと指定された式に基づいて、現在の行のセッションの状態を返し、現在のセッションを終了し、次の行で新しいセッションを開始します。
クエリ構文
SESS_END_IF({TIMESTAMP}, {TEST_EXPRESSION}) OVER ({PARTITION} {ORDER} {FRAME})
{TIMESTAMP}{TEST_EXPRESSION}application.launches > 0OVER()関数内のパラメーターの説明については、 ウィンドウ関数セクション を参照してください。
クエリの例
SELECT
endUserIds._experience.mcid.id AS id,
timestamp,
IF(application.applicationCloses.value > 0 OR application.crashes.value > 0, true, false) AS isExit,
SESS_END_IF(timestamp, application.applicationCloses.value > 0 OR application.crashes.value > 0)
OVER (PARTITION BY endUserIds._experience.mcid.id
ORDER BY timestamp
ROWS BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW)
AS session
FROM experience_events
ORDER BY id, timestamp ASC
LIMIT 10
結果
id | timestamp | isExit | session
|----------------------------------+-----------------------+----------+--------------------
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:55:53.0 | false | (0,1,true,1)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:56:51.0 | false | (58,1,false,2)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:57:47.0 | true | (56,1,false,3)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:58:27.0 | false | (40,2,true,1)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-01-18 06:59:22.0 | false | (55,2,false,2)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:16:23.0 | false | (1361821,2,false,3)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:17:17.0 | false | (54,2,false,4)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:18:06.0 | false | (49,2,false,5)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:18:39.0 | false | (33,2,false,6)
100080F22A45CB40-3A2B7A8E11096B6 | 2018-02-03 01:19:10.0 | false | (31,2,false,7)
(10 rows)
指定されたサンプルクエリの場合、結果はsession列に表示されます。 session列は、次のコンポーネントで構成されています。
({TIMESTAMP_DIFF}, {NUM}, {IS_NEW}, {DEPTH})
{TIMESTAMP_DIFF}{NUM}PARTITION BYで定義されたキーに対して、1から始まる一意のセッション番号。{IS_NEW}{DEPTH}パス
経路は、顧客のエンゲージメントの深さを把握し、エクスペリエンスの意図されたステップが設計どおりに機能していることを確認し、顧客に影響を与える可能性のある課題を特定するために使用できます。
次のADFは、以前と次の関係からのパスビューの確立をサポートしています。 前のページや次のページを作成したり、複数のイベントを順を追ってパスを作成したりすることができます。
前のページ
特定のフィールドの、ウィンドウ内の定義されたステップ数だけ離れた前の値を決定します。この例では、WINDOW関数がADFを設定するROWS BETWEEN UNBOUNDED PRECEDING AND CURRENT ROWのフレームで設定されており、現在の行とそれ以降のすべての行を確認できることに注意してください。
クエリ構文
PREVIOUS({KEY}, {SHIFT}, {IGNORE_NULLS}) OVER ({PARTITION} {ORDER} {FRAME})
{KEY}{SHIFT}{IGNORE_NULLS}{KEY}値を無視する必要があるかどうかを示すブール値。 デフォルトでは、値はfalseです。OVER()関数内のパラメーターの説明については、 ウィンドウ関数セクション を参照してください。
クエリの例
SELECT endUserIds._experience.mcid.id, timestamp, web.webPageDetails.name
PREVIOUS(web.webPageDetails.name, 3)
OVER(PARTITION BY endUserIds._experience.mcid.id
ORDER BY timestamp
ROWS BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW)
AS previous_page
FROM experience_events
ORDER BY endUserIds._experience.mcid.id, timestamp ASC
結果
id | timestamp | name | previous_page
|-----------------------------------+-----------------------+-------------------------------------+-----------------------------------------------------
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 17:15:28.0 | |
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 17:53:05.0 | Home |
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 17:53:45.0 | Kids | (Home)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 19:22:34.0 | | (Kids)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:01:12.0 | Home |
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:01:57.0 | Kids | (Home)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:03:36.0 | Search Results | (Kids)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:04:30.0 | Product Details: Pemmican Power Bar | (Search Results)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:05:27.0 | Shopping Cart: Cart Details | (Product Details: Pemmican Power Bar)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:06:07.0 | Shopping Cart: Shipping Information | (Shopping Cart: Cart Details)
(10 rows)
指定されたサンプルクエリの場合、結果はprevious_page列に表示されます。 previous_page列内の値は、ADFで使用されている{KEY}に基づいています。
次のページ
特定のフィールドの、ウィンドウ内の定義されたステップ数だけ離れた次の値を決定します。この例では、WINDOW関数がADFを設定するROWS BETWEEN CURRENT ROW AND UNBOUNDED FOLLOWINGのフレームで設定されており、現在の行とそれ以降のすべての行を確認できることに注意してください。
クエリ構文
NEXT({KEY}, {SHIFT}, {IGNORE_NULLS}) OVER ({PARTITION} {ORDER} {FRAME})
{KEY}{SHIFT}{IGNORE_NULLS}{KEY}値を無視する必要があるかどうかを示すブール値。 デフォルトでは、値はfalseです。OVER()関数内のパラメーターの説明については、 ウィンドウ関数セクション を参照してください。
クエリの例
SELECT endUserIds._experience.aaid.id, timestamp, web.webPageDetails.name,
NEXT(web.webPageDetails.name, 1, true)
OVER(PARTITION BY endUserIds._experience.aaid.id
ORDER BY timestamp
ROWS BETWEEN CURRENT ROW AND UNBOUNDED FOLLOWING)
AS next_page
FROM experience_events
ORDER BY endUserIds._experience.aaid.id, timestamp ASC
LIMIT 10
結果
id | timestamp | name | previous_page
|-----------------------------------+-----------------------+-------------------------------------+---------------------------------------
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 17:15:28.0 | | (Home)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 17:53:05.0 | Home | (Kids)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 17:53:45.0 | Kids | (Home)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 19:22:34.0 | | (Home)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:01:12.0 | Home | (Kids)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:01:57.0 | Kids | (Search Results)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:03:36.0 | Search Results | (Product Details: Pemmican Power Bar)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:04:30.0 | Product Details: Pemmican Power Bar | (Shopping Cart: Cart Details)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:05:27.0 | Shopping Cart: Cart Details | (Shopping Cart: Shipping Information)
457C3510571E5930-69AA721C4CBF9339 | 2017-11-08 20:06:07.0 | Shopping Cart: Shipping Information | (Shopping Cart: Billing Information)
(10 rows)
指定されたサンプルクエリの場合、結果はprevious_page列に表示されます。 previous_page列内の値は、ADFで使用されている{KEY}に基づいています。
間隔
時間間隔では、イベントが発生する前または後の特定の期間内に、潜在的な顧客行動を調査できます。
前の一致までの時間
このクエリは、前の一致イベントが表示されてからの時間の単位を表す数値を返します。 一致するイベントが見つからなかった場合は、nullを返します。
クエリ構文
TIME_BETWEEN_PREVIOUS_MATCH(
{TIMESTAMP}, {EVENT_DEFINITION}, {TIME_UNIT})
OVER ({PARTITION} {ORDER} {FRAME})
{TIMESTAMP}{EVENT_DEFINITION}{TIME_UNIT}OVER()関数内のパラメーターの説明については、 ウィンドウ関数セクション を参照してください。
クエリの例
SELECT
page_name,
SUM (time_between_previous_match) / COUNT(page_name) as average_minutes_since_registration
FROM
(
SELECT
endUserIds._experience.mcid.id as id,
timestamp, web.webPageDetails.name as page_name,
TIME_BETWEEN_PREVIOUS_MATCH(timestamp, web.webPageDetails.name='Account Registration|Confirmation', 'minutes')
OVER(PARTITION BY endUserIds._experience.mcid.id
ORDER BY timestamp
ROWS BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW)
AS time_between_previous_match
FROM experience_events
)
WHERE time_between_previous_match IS NOT NULL
GROUP BY page_name
ORDER BY average_minutes_since_registration
LIMIT 10
結果
page_name | average_minutes_since_registration
|-----------------------------------+------------------------------------
|
Account Registration|Confirmation | 0.0
Seasonal | 5.47029702970297
Equipment | 6.532110091743119
Women | 7.287081339712919
Men | 7.640918580375783
Product List | 9.387459807073954
Unlimited Blog|February | 9.954545454545455
Product Details|Buffalo | 13.304347826086957
Unlimited Blog|June | 770.4285714285714
(10 rows)
指定されたサンプルクエリの場合、結果はaverage_minutes_since_registration列に表示されます。 average_minutes_since_registration列内の値は、現在のイベントと前のイベントの時間の差です。 時間の単位は、以前に{TIME_UNIT}で定義されていました。
次の一致までの時間
このクエリは、次に一致するイベントの背後にある時間の単位を表す負の数値を返します。 一致するイベントが見つからない場合は、nullが返されます。
クエリ構文
TIME_BETWEEN_NEXT_MATCH({TIMESTAMP}, {EVENT_DEFINITION}, {TIME_UNIT}) OVER ({PARTITION} {ORDER} {FRAME})
{TIMESTAMP}{EVENT_DEFINITION}{TIME_UNIT}OVER()関数内のパラメーターの説明については、 ウィンドウ関数セクション を参照してください。
クエリの例
SELECT
page_name,
SUM (time_between_next_match) / COUNT(page_name) as average_minutes_until_order_confirmation
FROM
(
SELECT
endUserIds._experience.mcid.id as id,
timestamp, web.webPageDetails.name as page_name,
TIME_BETWEEN_NEXT_MATCH(timestamp, web.webPageDetails.name='Shopping Cart|Order Confirmation', 'minutes')
OVER(PARTITION BY endUserIds._experience.mcid.id
ORDER BY timestamp
ROWS BETWEEN CURRENT ROW AND UNBOUNDED FOLLOWING)
AS time_between_next_match
FROM experience_events
)
WHERE time_between_next_match IS NOT NULL
GROUP BY page_name
ORDER BY average_minutes_until_order_confirmation DESC
LIMIT 10
結果
page_name | average_minutes_until_order_confirmation
|-----------------------------------+------------------------------------------
Shopping Cart|Order Confirmation | 0.0
Men | -9.465295629820051
Equipment | -9.682098765432098
Product List | -9.690661478599221
Women | -9.759459459459459
Seasonal | -10.295
Shopping Cart|Order Review | -366.33567364956144
Unlimited Blog|February | -615.0327868852459
Shopping Cart|Billing Information | -775.6200495367711
Product Details|Buffalo | -1274.9571428571428
(10 rows)
指定されたサンプルクエリの場合、結果はaverage_minutes_until_order_confirmation列に表示されます。 average_minutes_until_order_confirmation列内の値は、現在のイベントと次のイベントの時間の差です。 時間の単位は、以前に{TIME_UNIT}で定義されていました。
次の手順
ここで説明した関数を使用して、Experience Eventを使用して独自のQuery Service データセットにアクセスするためのクエリを作成できます。 Query Serviceでのクエリのオーサリングについて詳しくは、 クエリの作成に関するドキュメントを参照してください。
その他のリソース
次のビデオでは、Adobe Experience Platform インターフェイスおよび PSQL クライアントでクエリを実行する方法を説明します。 さらに、このビデオでは、XDM オブジェクト内の個々のプロパティ、Adobe定義の関数の使用、CREATE TABLE AS SELECT (CTAS)の使用に関する例も使用しています。