CDP構築時の主な流れと手順
この記事ではCDP構築時に発生する作業工程について、プロジェクトマネジメントをされる担当者が知っておくべきことにとどめて書いています。CDP導入や活用のプロジェクトに携わっている方、今後携わる予定の方、実行部分を担当されている方向けの記事となります。また、当記事の下部に、CDP導入にかかる費用と項目例をまとめたホワイトペーパーダウンロードへのリンクもご用意しておりますので、ぜひCDPご検討の際にお役立てください。
CDPを構築するにあたり、具体的にどのようなプロセスが発生するのでしょうか？構築プロセスは基本的には開発領域ですので、作業自体はエンジニアが行う仕事になりますが、プロジェクトを推進するにあたっては大枠のイメージだけでも持っておかないと必要な人員や期間を考えることはできません。
目次
CDP構築時の主な流れ
CDP構築は、基本的に下図のような6つのプロセスに分けられます。
出典 著者名：小畑 陽一 (著), 菊池 達也 (著), 仁藤 玄 (著) 書名：ユーザー起点マーケティング実践ガイド 出版社：マイナビ出版社 出版年：2021 該当ページ：70
上図の流れをそれぞれ具体的に見ていきましょう。
1. CDP基盤設計
まずは既存データの確認を行い、CDPでデータを活用するためのシステム連携の構造を設計します。自社が保有するデータの種類を洗い出し、データ同士の連携方法を確認し、データ活用基盤の構成をどのようにつくるか、という設計を指します。※詳細は別記事：CDP構築前に確認する5つのポイントに書いています。まだご覧になっていない方は併せてお読みください。
2. データ取得設計
CDP基盤設計の次に、CDPにどのようにデータを取り込むか、データ取得設計を行います。
CDPへのデータ取込方法
CDPに取り込むデータは、さまざまな外部システムやファイルストレージに存在しており、各データソースからAPIやバッチなど連携手法を使って連携してくため、それぞれどの手法が最適であるか設計していきます。そこで便利なのがCDPの重要な機能の一つである連携用のコネクター機能です。
例えば、Treasure Data CDPやTealium Customer Data Hubには多数の連携用のインターフェース（コネクター）が標準で提供されています。
クラウドストレージであるAmazon S3などからの取り込みは、開発をせずとも画面に必要な項目を入力することで、容易にデータを取り込むことができます。
出典 著者名：小畑 陽一 (著), 菊池 達也 (著), 仁藤 玄 (著) 書名：ユーザー起点マーケティング実践ガイド 出版社：マイナビ出版社 出版年：2021 該当ページ：72
ただし、ツールによってはコネクターが標準で用意されていない場合もあります。
その場合は、API（Webhook、ポストバック含む）を利用したり、別途バッチを用意してCDPへデータを格納することになります。
この場合は、APIやバッチの開発工数が発生することもあります。各種データ連携方法の主な種類と使用する条件・特徴は下記のようになります。
データの活用目的などからどのような連携が適切かを判断していくといいでしょう。
出典 著者名：小畑 陽一 (著), 菊池 達也 (著), 仁藤 玄 (著) 書名：ユーザー起点マーケティング実践ガイド 出版社：マイナビ出版社 出版年：2021 該当ページ：72
3. データインポート（データの取込み）
データ取得設計が完了したら、データインポート（データの取込み）を行います。
データ取得設計をもとに取込作業を行い、データの確認や取り込み作業の自動化（ジョブフロー）を行っていくのですが、いくつか注意すべき点についてまとめました。
▼CDPへ取り込むデータの精査
CDPへの連携を行う際、CDP本体の制限（契約プランなど）によっては、データを取り込める容量の上限、1回の処理で取り込めるレコード数に制限が設けられている場合があります。そのため、CDPにデータを取り込むにあたり、データの精査を行う必要があります。 データを蓄積するにあたっての段階として「データレイク」「データウェアハウス」「データマート」というデータの加工・処理があります。
出典 著者名：小畑 陽一 (著), 菊池 達也 (著), 仁藤 玄 (著) 書名：ユーザー起点マーケティング実践ガイド 出版社：マイナビ出版社 出版年：2021 該当ページ：50
データレイクの状態からすべて取り込める場合もあれば、データウェアハウスの状態で取り込むなど、データ量や活用用途に合わせて調整を行っていきます。 CDPに取り込むデータ量を調整する場合の精査項目の一例を次に示します。
精査の方法例
- 取り込む「期間」を絞る
└ 直近3年間分 など - 取り込む「条件」を絞る
└ アノニマスなデータを含めない
└ 削除フラグが立っているデータを含めない など - 取り込む「項目」を絞る
└ 値がほぼ入らない項目を削る
└ 同じ値が入るデータ項目を削る
└ 分析で利用しない項目を削る など
4. データウェアハウス構築
データインポートが完了したら、データ活用基盤内に各データソースが格納されたデータレイク（洗練されていない生データ）の状態となります。
データレイクのままではデータ分析・活用が難しいため、データウェアハウスに加工・変換し、構造を統一することで分析などに活用しやすい形にします。
データレイクは外部システムやファイルから連携されるデータに合わせてつくられるため、スキーマ（テーブルの構造）もそのデータに合わせて設定されることになります。一方で、データウェアハウスは事前にスキーマを定義し、その定義に合わせることで必要なデータ・決まった構造でデータを蓄積します。
また、少し込み入った話になりますが、データウェアハウスでは基本的には正規化（データの重複をなくし整合的にデータを取り扱えるよう設計すること）を行わず、非正規化された状態となります。これは、分析・解析を行う際に多くのデータを参照する際、データ同士の結合をできる限り減らすことで、データを単純化し、処理速度やメモリ使用量の削減などのパフォーマンスを向上させるためと覚えておけば大丈夫です。
出典 著者名：小畑 陽一 (著), 菊池 達也 (著), 仁藤 玄 (著) 書名：ユーザー起点マーケティング実践ガイド 出版社：マイナビ出版社 出版年：2021 該当ページ：75
5. データマート構築
データウェアハウスを構築したら、顧客にデータを統合するため、「統合顧客データマート」を構築します。
統合顧客データマートは、すべての顧客を一意化したIDリストに対して、「どのような顧客か」という属性情報と「どのような行動をしているか」という行動情報を顧客に紐づけたデータテーブルを指します。
つまり、統合顧客データマートを参照すれば「個客がどのような人物で、どのように行動しているか」が把握できるようになることを目指します。データは主に「マスターデータ」と「トランザクションデータ」に分かれています。※「マスターデータ」と「トランザクションデータ」についての詳しくは過去の記事（CDP構築前に確認する５つのポイント）をご覧ください。
統合顧客IDリストに対して、マスターデータである顧客リストから「性別、年齢、居住地」などの属性情報を付与します。トランザクションデータからは、購買履歴から「購入回数、購入金額、平均購入金額」、アクセスログから「Webサイト訪問回数、最新Webサイト訪問日」、キャンペーン応募ログから「キャンペーン応募有無」などの行動情報を付与します。データ項目は一例ですが、実際には100カラム以上で構成されることもあります。
出典 著者名：小畑 陽一 (著), 菊池 達也 (著), 仁藤 玄 (著) 書名：ユーザー起点マーケティング実践ガイド 出版社：マイナビ出版社 出版年：2021 該当ページ：76
また、この統合顧客データマートを活用して分析や施策を実行するため、これらを想定してデータ項目を作成します。
例えば、アクセスログや購買履歴に関して、「直近30日以内の訪問回数」や「特定ドメインの訪問回数」「特定商品カテゴリの購買回数」など、さまざまな条件で行動量を集計したカラムを作成する必要があります。
出典 著者名：小畑 陽一 (著), 菊池 達也 (著), 仁藤 玄 (著) 書名：ユーザー起点マーケティング実践ガイド 出版社：マイナビ出版社 出版年：2021 該当ページ：77
ここでよくある失敗として、最初から完璧なデータマートを目指しすぎて要件に時間がかかりすぎてしまうことがあります。
まずは優先度の高い分析や施策の実現に必要なデータ項目を設定した統合顧客データマートを作成しましょう。その後、新たに実現したい分析や施策に足りない項目が出てきたときに、項目を拡張することをおすすめします。
統合顧客データマートでは顧客の状態を可視化すること、その顧客の状態に合わせたマーケティングコミュニケーションをスムーズに実行しやすくすることが目的となります。そのため、統合顧客データマートで定義・集計するデータ項目は、そのデータを利用して顧客をターゲティングするなど、マーケティング施策に活かせるものを設計しましょう。
6. エクスポートデータ・コネクター作成
CDP内にデータマートが構築されたら、各種マーケティングツールへの連携を行います。
各種ツールと連携することで「購入回数が1回のみでWebによく訪れる顧客」や「半年以内にメルマガを開封したが購入していない顧客」など、特定の顧客セグメントに対してマーケティング施策を行うことができます。CDPからデータを連携するにあたり、このような施策を行うために必要なデータを考えなければなりません。
統合顧客データマート上で、すでに必要なデータが集まっていることが多いですが、改めて施策を行う上でデータマート内の項目に不足がないかチェックが必要です。またツールによっては、ツール側で用意されているデータ項目もあるため、あらかじめ確認しておきましょう。
基本的にはバッチ処理を行い、日次や数時間おきの頻度でデータを連携します。データ活用のビジネス要件に合わせて連携頻度を設定します。顧客セグメントにおけるリアルタイム性を求めるのであれば、CDPツールによって対応可否が分かれますので、ツール選定の参考にしましょう。
また、MAやWeb接客などのマーケティングツールのログデータ（施策結果など）をCDPに返すよう設計することも大切です。例えば、メール配信時には顧客ごとの開封/クリックデータや、Web接客時には顧客ごとに接触した回数や施策利用有無などのデータをCDPに返します。顧客ごとに施策が何回当たったか、施策に対して反応したかどうか（メール開封、クリックなど）が判別できることで、過度な訴求を抑制できたり、より柔軟にコミュニケーションを行えます。
出典 著者名：小畑 陽一 (著), 菊池 達也 (著), 仁藤 玄 (著) 書名：ユーザー起点マーケティング実践ガイド 出版社：マイナビ出版社 出版年：2021 該当ページ：83
実際に上記を実践してみると、確認や実務に多くの工数がかかります。さらに、実際の作業現場では、より細かな課題が発生していきます。データの持ち方は会社それぞれです。前例も少なく、根気のいる作業であることは間違いないですが、 この記事を通してCDP構築のプロセスの大枠をご理解いただけたのであれば嬉しい限りです。
お役立ち資料をダウンロード『CDP導入にはいくらかかる？』
1to1マーケティング、OMO施策など、顧客体験を向上させるためにCDPの導入を検討されているケースをよくお見受けします。当社でも日ごろからCDP関連のご相談やご質問を多くいただいておりますが、中でも費用に関するご質問を大変多くいただきます。本資料では、これまでの当社の経験を元にした、DXプロジェクトを推進する上で知っておきたい「CDPの導入にかかる費用」についてまとめています。下記バナーからダウンロードしてお役立てください。
CDP関連の記事はこちらから
他にも、データ統合に関する情報や、CDPに関するセミナーレポート、費用や活用方法などの記事をご用意しています。皆さまの目的に合わせてご覧いただけますと幸いです。
→CDP関連の記事はこちらから
この記事を書いた人
- 小畑 陽一
- 株式会社UNCOVER TRUTH
取締役COO(Chief Operating Officer)
music.jpやルナルナを手がけるエムティーアイ社出身。ソリューション事業責任者として、大手企業向けモバイルサイト構築ソリューションで、国内ナンバーワンのASPサービスを展開。2014年、取締役として株式会社UNCOVER TRUTHの取締役COOとして経営に参加。経営・事業戦略とマーケティングを管掌。 ad:tech Tokyo / Kyushu、宣伝会議、MarkeZine、Web担当者フォーラムなど講演活動多数。
著書：『ユーザー起点マーケティング実践ガイド』（CDP専門書籍）
データ分析や基盤構築、プロダクトの活用などについて、貴社の状況と目的に合わせて幅広くご提案します。
カスタマーデータのマーケティング活用にお困りの際はぜひお声がけください。