Criteoでのデータ主導の意思決定の強化

製品を改善する唯一の方法は、顧客が製品をどのように使用しているかを理解することです。 そのためには、正確なデータと関連するフィードバックを収集して分析する必要があります。 この情報を入手する最良の方法は、顧客との正直で率直な会話を通じてです。 しかし、正しい質問をし、その見返りに正しい答えを得ていることをどのように確認できますか？

他のオンライン広告プラットフォームと同様に、Criteoは顧客のフィードバックに依存してデジタルマーケター向けのより良い製品を構築しています。 私たちは、あらゆる規模の小売業者、ブランド、出版社に総合的な広告ソリューションのスイートを提供します。 私たちのプラットフォームは、毎月25億人のオンライン買い物客の行動を分析し、AIを使用して、ブランドに関与する可能性が高いユニークなオーディエンスに関連性の高い広告を配信します。

混雑した市場では、クライアントがスーパーヒーローをマーケティングできるように支援したいと考えています。 私たちは、彼らに私たちのプラットフォームを活用して、日常業務を容易にすることを望んでいます。 しかし、ユーザーエクスペリエンスをある程度確実に測定する方法が常にあるとは限りませんでした。

マネージドサービスからセルフサービスダッシュボードへの移行

私はデータサイエンティストであり、Criteoのインターフェースおよび測定チームの責任者です。 私がCriteoに来る前は、私たちはマネージドサービス会社でした。 私たちの顧客は、彼らの広告キャンペーンのさまざまな側面の世話をするように私たちに電話して頼むでしょう。 このアプローチは私たちの時間とリソースを使い果たし、革新を不可能にしました。

そのため、クライアント向けのセルフサービス分析ダッシュボードの構築を開始しました。 データをより細かく制御できるようにすることで、リターゲティングキャンペーンからバナー広告まで、あらゆることに責任を持つことができます。

自己管理型ダッシュボードを構築するときは、3つのステップのプロセスに従います。 まず、ユーザーがプラットフォームとどのようにやり取りするかを調べることで、ユーザーにとって最も役立つ指標を特定します。 次に、最初のダッシュボードを作成し、それを12の顧客に展開します。顧客は、新しいツールを1〜2か月間試用します。 フィードバックの最初のラウンドの後、ダッシュボードをすべてのユーザーが利用できるようにする前に、ダッシュボードを微調整するためにさらに数週間を費やします。

クライアントのフィードバックを評価する新しい方法

これらのダッシュボードの作成を最初に開始したとき、分析トレーニングモジュールと、ユーザーにエクスペリエンスの説明を求める電話を試用しました。 トレーニングを受けたにもかかわらず、混乱して新機能の使い方がわからないとよく言われました。 お客様が混乱を招くと主張している機能を試したことさえあるかどうかはわかりませんでした。 時々、彼らが電話の直前に製品でほんの数分しか過ごしなかったことが明らかでした。

新機能に関する重要なフィードバックを求めたにもかかわらず、一部のテスターは、好意的なフィードバック以外のものを共有すると、否定的すぎることを恐れていることがわかりました。 彼らが新しいダッシュボードをテストして評価のコンテキストを提供している間、それらの使用を追跡する必要があることは明らかでした。

私がCriteoに来たのとほぼ同時に、Segmentをオンボーディングして顧客データを収集、クリーンアップ、制御し、Amplitudeをオンボーディングしてクライアントがプラットフォームをどのように使用しているかを分析しました。 Amplitudeにより、事例証拠から離れ、データを使用して新しいプラットフォーム機能に関する決定を推進できるようになりました。

新しいシステムが最初に役立ったのは、クライアントのフィードバックに優先順位を付けることでした。 これで、どのクライアントがダッシュボードを頻繁に使用したかを確認できるため、クライアントのコメントや懸念事項が非常に貴重であることがわかります。 誰かがダッシュボードにあまり時間を費やしていないのに、見た目が気に入らない、または機能が役に立たないと言われた場合、そのフィードバックをそれほど重視しません。 Amplitudeは、最も本物のフィードバックを特定し、実際の問題に焦点を当てるのに役立ちました。

顧客ワークフローのテストと改善

次に、キャンペーン、クーポン、コンテンツの作成など、セルフサービスプラットフォームのコアを形成する7つの自動ワークフローの構築と改良に取り組みました。

Amplitudeを使用して、バナー広告の作成やリターゲティングキャンペーンの組み立てなど、特定のワークフローを顧客が完了できるかどうかを判断しました。

Amplitudeは、ワークフローを最後まで実行した顧客の割合を示し、途中で行き詰まった場所を監視できます。 ユーザーの90％がワークフローを完了していることがわかると、それはかなりうまく機能していることがわかります。 一方、個々のワークフローの完了率が30％しかない場合は、大幅な変更を加える必要があることがわかります。

Amplitudeの詳細な分析により、お客様の問題点を特定し、それに応じてワークフローを再構築することができます。 わずか数か月で、キャンペーン作成ワークフローの完了率は3倍以上になりました。 まだ道のりはありますが、事例証拠に頼り続けていたら、何が悪かったのかについてはまだ暗闇の中にいるでしょう。

Amplitudeは、製品への変更を展開する方法の改善にも役立ちました。 当社の製品データサイエンティストは、機能を追加および削除し、テストの前後に実行してユーザーの反応を測定できます。 お客様が機能を採用している場合は、それを維持します。 しかし、採用率が低いことがわかった場合は、他のことを試すのは簡単です。 また、改善が必要なワークフローに優先順位を付け、現在の顧客の行動に基づいてプラットフォームへの将来の追加を予測することもできます。

Criteoの内部データガバナンスの変革

これまで、Amplitudeの詳細な洞察が、プラットフォームと顧客のワークフローに外部向けの変更をもたらす方法について説明してきました。 しかし、Amplitudeを使用することで、Criteoの内部データガバナンス慣行の変革も促されました。

私たちのチームは何年にもわたって成長してきました。 当初は、Amplitudeを使用するアナリストと開発者が1人いましたが、現在は、新入社員や製品マネージャーを含む60人の内部ユーザーがいます。 成長するにつれて、データへのアクセス方法とデータについて話す方法を変更する必要がありました。

適切なドキュメントがなかったため、同僚、アナリストのEve-AnnePaganiとMyriamKlikelが問題の責任を負い、包括的なユーザーガイドを作成しました。 また、ユーザーが質問したり、サポートをリクエストしたり、隔週で1時間にわたって開かれるディスカッションに参加したりできるSlackチャネルを開設しました。

これで、開発、プロジェクト、および分析チームのすべてのAmplitudeユーザーがアクセスできる中央リポジトリに、分類法、データトラッキング、およびイベントの規則が収集されました。 誰もが同じガイドラインに従うので、さまざまなチームがAmplitudeをどのように使用するか、およびデータについて話すときの意味について混乱や不明な点はありません。

自立と革新の文化

Amplitudeは、データサイエンティストではない人々がデータにアクセスできるようにします。 そのチャートと視覚化は、複雑な情報をわかりやすい形式で表示します。 当社の製品マネージャーは、データアナリストに結果の提供と解釈を依頼することなく、目標を追跡するレポートを生成できます。 当社の製品マネージャーはお客様のキャンペーンに自由に集中でき、データアナリストは引き続きサポートを提供して新しい機能を構築できます。

Amplitudeは、Criteoで自立の文化を生み出しました。 これにより、マネージドサービスのビジネスモデルから、セルフサービスのオンラインマーケティングツールを顧客に提供するモデルに移行すると同時に、必要に応じて製品マネージャーからのサポートを提供できるようになりました。 また、進捗状況を追跡し、より優れたワークフローを構築し、コラボレーションするためのツールを提供することで、社内のチームとプロセスを強化しました。

Amplitudeを使用して、製品に有意義な改善を加えるのに役立つリアルタイムの洞察を収集し始めました。 現在、Criteoは、従業員がデータに基づいた意思決定を行えるようにし、将来の成長と革新の準備を整えています。