MMM als Methode zur kausalen Inferenz

Berücksichtigen Sie die folgenden Verallgemeinerungen zum Marketing Mix Modeling (MMM) als Methode der kausalen Inferenz:

  • MMM ist ein Tool zur kausalen Inferenz, mit dem Sie die Auswirkungen Ihres Werbebudgets und der Budgetzuweisung auf KPIs schätzen können. Aus MMM abgeleitete Erkenntnisse wie ROI und Reaktionskurven haben eine klare kausale Interpretation und die Modellierungsmethode muss für diese Art der Analyse geeignet sein.

  • Das Framework für kausale Inferenzen bietet wichtige Vorteile, die auch kritische Bestandteile jeder gültigen und interpretierbaren MMM-Analyse sind:

    • ROI und andere kausale Schätzgrößen werden klar mithilfe der Notation potenzieller Ergebnisse definiert, die sowohl intuitiv als auch mathematisch streng ist.

    • Notwendige Annahmen können ermittelt und transparent gemacht werden. Für alle Modelle sind Annahmen erforderlich, um gültige Schätzungen der kausalen Schätzgrößen zu erhalten.

  • Es ist allgemein bekannt, dass randomisierte Tests als ideale Methode zur Schätzung von Kausaleffekten gelten. MMM ist jedoch ein Beispiel für kausale Inferenzen aus beobachteten Daten.

  • MMM bietet wichtige Vorteile gegenüber Tests:

    • Bei Werbung sind für viele Testdesigns Daten auf Einzelnutzerebene erforderlich, die nicht aktuellen Datenschutzstandards entsprechen. MMM ist datenschutzfreundlich, da hier aggregierte, beobachtete Daten verwendet werden.

    • Tests sind aus Kosten- und praktischen Gründen oft schwierig durchzuführen. Beobachtete Daten sind hingegen leicht zugänglich.

    • Bei Tests wird in der Regel eine bestimmte Größe geschätzt. Bei Werbung kann ein geografischer Test beispielsweise dazu dienen, den ROAS eines bestimmten Channels wie dem Fernsehen zu schätzen. Mit einem Modell für kausale Inferenzen wie MMM lassen sich viele Informationen gewinnen, z. B. der ROI für jeden Media-Channel, vollständige Reaktionskurven und die Budgetzuweisung, ohne dass ein komplexes und strenges Testdesign erforderlich ist, das möglicherweise nicht praktikabel ist.

Testbare und nicht testbare Annahmen

Da MMM auf beobachteten Daten basiert, sind statistische Annahmen erforderlich, die für die meisten Tests nicht notwendig sind. Diese Annahmen können als nicht testbar und testbar kategorisiert werden.

Warum sind diese Annahmen aus praktischer Sicht wichtig? Mehrere Modelle können eine gute Anpassung und Vorhersagekraft aufweisen, aber unterschiedliche ROI- und Optimierungsergebnisse liefern, was die Auswahl des besten Modells erschwert.

Nicht testbare Annahmen

  • Eine als bedingte Austauschbarkeit bekannte Bedingung ist die Hauptannahme, die nicht testbar ist und erforderlich ist, damit ein MMM-Regressionsmodell genaue Ergebnisse zur kausalen Inferenz liefert. Diese Bedingung ist nicht testbar, da es keine statistische Möglichkeit gibt, ihre Gültigkeit allein anhand von beobachteten Daten zu bestimmen.

  • Im Allgemeinen bedeutet bedingte Austauschbarkeit, dass die Kontrollvariablen sowohl

    • alle Störvariablen umfassen, also Variablen, die kausal sowohl die Media-Ausführung als auch den KPI beeinflussen, und

    • alle Mediatorvariablen ausschließen, also Variablen, die im kausalen Zusammenhang zwischen Medien und KPI liegen.

  • Ein kausales Diagramm kann verwendet werden, um die Annahme der bedingten Austauschbarkeit zu rechtfertigen. Das kausale Diagramm muss auf Expertenwissen aus dem Fachgebiet basieren, da es keinen statistischen Test gibt, um die korrekte Diagrammstruktur allein anhand von beobachteten Daten zu bestimmen.

  • In der Realität wird die Annahme der Austauschbarkeit nie perfekt erfüllt. Das klassische Prinzip gilt: „Alle Modelle sind falsch, aber einige sind nützlich.“

Testbare Annahmen

  • Testbare Annahmen umfassen alles, was mit der mathematischen Struktur des Modells zu tun hat. Erwägen Sie Folgendes:

    • Wie werden Media-Effekte im Modell dargestellt, einschließlich verzögerter Effekte und abnehmender Renditen?

    • Wie werden Kontrollvariablen modelliert? Sind nicht lineare Transformationen erforderlich?

    • Wie werden Trend und Saisonalität modelliert?

  • Testbare Annahmen können bis zu einem gewissen Grad anhand von Messwerten zur Güte der Anpassung bewertet werden, einschließlich Prognosemesswerten wie dem R-Quadrat außerhalb der Stichprobe. Aber:

    • Die Messwerte zur Güte der Anpassung vermitteln jedoch kein vollständiges Bild davon, wie gut ein Modell für kausale Inferenzen geeignet ist. Es ist wahrscheinlich, dass sich das beste Modell für kausale Inferenzen vom besten Modell für Vorhersagen unterscheidet.

    • Je mehr Kandidatenmodelle Sie vergleichen, desto höher ist das Risiko einer Überanpassung. Das beste Modell ist beispielsweise nicht das mit der besten Anpassung außerhalb der Stichprobe.

    • Es gibt keinen Grenzwert für R-Quadrat oder andere Messwerte, die ein Modell gut oder schlecht machen. Ein Modell mit einem R-Quadrat von 99 % außerhalb der Stichprobe kann dennoch ein schlechtes Modell für kausale Inferenzen sein.

Schlussfolgerungen

Es gibt keine universell beste Lösung für MMM. Dies liegt daran, dass die Prinzipien der kausalen Inferenz aus beobachteten Daten unterschiedliche Stärken und Schwächen haben. Wir empfehlen allen MMM-Nutzern, MMM im Rahmen der kausalen Inferenz kritisch zu betrachten, unabhängig davon, ob Sie Meridian oder eine andere Lösung verwenden. Ziel von Meridian ist es, Ihnen größtmögliche Klarheit darüber zu verschaffen, was Ihr MMM ist, wie es funktioniert und wie Sie Ihre Ergebnisse interpretieren sollten.