Mediaausgaben im Szenario verdoppeln: was ein Simulator nicht weiß

Drei Sättigungskurven, die sich bis 118.000 € Wochenausgaben überdecken und bis 170.000 €, dem verdoppelten Plan, weit auseinanderlaufen.
Illustrative Daten für einen zusammengesetzten Fall.

Deutscher Online-Möbelhändler, 156 Wochen Bestellungen und drei Mediakanäle, mit der Frage, was eine Verdopplung der Mediaausgaben im nächsten Jahr bringen würde.

Ein zusammengesetzter Fall, gebaut aus der Art von Datei, die wir fast jede Woche sehen. Ein Online-Möbelhändler in Deutschland, rund 9.000 Bestellungen pro Woche, mit drei bezahlten Kanälen: Online-Video, Paid Social und Suche. Über drei Jahre bewegten sich die gesamten Mediaausgaben zwischen 40.000 € und 118.000 € pro Woche, um einen Durchschnitt von 85.000 €.

Das Unternehmen hatte einen neuen Mehrheitseigner, und der hatte einen Vorschlag: „Verdoppeln Sie die Media im nächsten Jahr. Sagen Sie uns, was das mit den Bestellungen macht.“

Das ist der letzte Schritt der Story Planung, der, in dem die Basisprognose von einer Entscheidung gebogen wird. Der Simulator antwortete, wie er es immer tut. Die meiste Arbeit bestand darin zu erklären, hinter welchem Teil der Antwort die Daten standen.

Wie die Datei aussah

156 Wochenzeilen: Bestellungen, Ausgaben je Kanal, Durchschnittspreis, ein Promotion-Kennzeichen und eine Spalte für Feiertage. Die Ausgaben variierten gut innerhalb ihrer Spanne: ruhige Sommerwochen nahe 40.000 €, die Herbstoffensive nahe 118.000 €, alles dazwischen ziemlich oft. Diese Variation ist der Grund, warum das zugrunde liegende Modell dort vertrauenswürdig war, wo es Daten hatte.

Was die Datei nicht enthielt, war eine einzige Woche auch nur in der Nähe von 170.000 €. Den Durchschnitt zu verdoppeln, setzt fast jede Woche des Plans über die höchste Woche, die je gelaufen ist.

Was der Simulator tat

Die Szenariosimulation ist kein neues Modell. Sie nutzt die Schätzung aus Beitrag und Zerlegung nach Treibern: Jeder Kanal läuft durch einen geometrischen Adstock, sodass Ausgaben noch einige Wochen nachwirken, und dann durch eine Hill-Kurve, eine S-förmige Sättigung, in der jeder zusätzliche Euro weniger bringt als der vorige. Eine Regression schätzt, wie viel jeder so transformierte Kanal beiträgt.

Sie blickt 26 Wochen voraus, also wurde die Frage zur ersten Hälfte des nächsten Jahres. Der Status quo wiederholt die Media des Vorjahres Woche für Woche über diese 26 Wochen. Das Szenario multipliziert sie mit zwei. Um eine Spanne anzugeben, zieht der Simulator die Koeffizienten 1.000-mal aus ihrer geschätzten Unsicherheit und meldet das 10. bis 90. Perzentil.

Die ausgegebene Antwort: +10,8 % Bestellungen, P10 bis P90 von +8,9 % bis +12,6 %. Zum Vergleich: Eine Erhöhung um 25 % kam auf +3,5 %, von +2,6 % bis +4,4 %.

Der Simulator gab neben dem verdoppelten Szenario auch eine Warnung aus: In 25 der 26 Wochen des Horizonts liegt mindestens ein Kanal um mehr als ein Zehntel seiner historischen Spanne über seiner höchsten beobachteten Woche. Er versteckt das nicht, und die Warnung ist die wichtigste Zeile auf der Seite.

Forest-Plot: Eine Erhöhung um 25 % bringt 3,5 % mehr Bestellungen, mit schmalem Band; die Verdopplung bringt laut Ausgabe 10,8 %, aber 6,2 % bis 15,1 % über Kurven, die gleich gut passen.
Forest-Plot: Eine Erhöhung um 25 % bringt 3,5 % mehr Bestellungen, mit schmalem Band; die Verdopplung bringt laut Ausgabe 10,8 %, aber 6,2 % bis 15,1 % über Kurven, die gleich gut passen. Illustrative Daten für einen zusammengesetzten Fall.

Was die Zahl nicht tragen kann

Das Band von P10 bis P90 deckt die Unsicherheit der Koeffizienten ab. Die Form jeder Hill-Kurve, wo sie knickt und wie flach sie wird, gilt als bekannt. Innerhalb des beobachteten Bereichs ist das eine faire Vereinfachung, weil die Daten die Form festlegen. Außerhalb ist die Form die ganze Frage.

Um zu sehen, wie sehr, schätzten wir alternative Kurven auf denselben beobachteten Bereich. Eine steilere, die über 118.000 € hinaus weiter steigt, und eine flachere, die bald danach sättigt. Zwischen 40.000 € und 118.000 € liegen alle drei nur wenige Dutzend Bestellungen pro Woche auseinander, deutlich innerhalb des wöchentlichen Rauschens: Die Daten haben keine Möglichkeit, eine zu bevorzugen. Bei 170.000 € laufen sie auseinander.

  • Geschätzte Kurve: Die Verdopplung bringt rund 970 Bestellungen pro Woche, +10,8 %.
  • Steilere Kurve: rund 1.360, +15,1 %.
  • Flachere Kurve: rund 560, +6,2 %.

Die Kosten jeder zusätzlichen Bestellung, die Zahl, an der eine Verdopplung tatsächlich hängt, reichen von etwa 62 € auf der steilen Kurve bis etwa 152 € auf der flachen. Das eine ist eine gute Investition, das andere nicht, und die Datei kann nicht sagen, in welcher Welt das Unternehmen lebt.

Das Urteil ist also differenziert. Der Simulator hilft beim Szenario mit +25 %, das fast vollständig innerhalb der Daten bleibt, und bei der Richtung des verdoppelten: mehr Bestellungen, mit sinkender Rate. Bei der Größe des verdoppelten hilft er nicht. Die ausgegebenen +10,8 % sind die geschätzte Kurve, verlängert in einen Bereich ohne Beobachtungen. Allein präsentiert, hätten sie sicherer gewirkt, als sie sind, und das Budget wäre auf der Form einer Kurve unterschrieben worden, die niemand gesehen hat.

Was stattdessen zu tun ist

  • Stufenweise erhöhen statt springen. Erhöhen Sie die Ausgaben für ein Quartal um 25 bis 30 %. Das verlängert den beobachteten Bereich in den stärksten Wochen auf rund 150.000 €, und die nächste Neuschätzung kann sehen, wo die Kurve tatsächlich knickt.
  • Das obere Ende der Spanne gezielt testen. Verdoppeln Sie die Ausgaben in einigen Regionen für acht bis zehn Wochen und halten Sie den Rest auf Plan. Mit einer Regionsspalte in der Datei kann das Geo-/Segment-MMM den Kontrast direkt lesen, und die verdoppelten Regionen werden zu beobachteten Daten statt Extrapolation.
  • Über die Kosten je zusätzlicher Bestellung entscheiden, nicht über die Summe. Legen Sie vorab fest, ab welchen Kosten sich mehr Media nicht mehr rechnet, und lassen Sie den Test sagen, ob das Unternehmen darüber oder darunter liegt.

Die Lehre

Ein Simulator liefert immer eine Zahl, auch für Fragen, die die Daten nie gesehen haben. Das Intervall darum deckt nur ab, wovon das Modell weiß, dass es es nicht weiß. Wenn ein Szenario einen Treiber über alles in der Historie hinausschiebt, ist die ehrliche Antwort die Bandbreite der Formen, die die Daten zulassen, und der günstigste Weg, sie einzuengen, ist, die Ausgaben, über die Sie nachdenken, tatsächlich zu beobachten.

tea, das Produkt

Ihre Datei, diese Frage

Fünfzehn Analysen auf einer CSV mit Wochendaten, mit Intervallen und Diagnosen offen gezeigt, und einem klaren Satz, wenn die Daten keine Antwort hergeben. Kostenlos während der Beta, auf Einladung.

Einen Platz in der Beta anfragen

tea, das Produkt

Fünfzehn ökonometrische Analysen auf Ihrer eigenen CSV: Szenariosimulation, Sättigungskurven, Elastizitäten, Budgetaufteilung. Intervalle und Diagnosen offen gezeigt, und ein klarer Satz, wenn die Datei keine Antwort hergibt.

Kostenlos während der Beta, auf Einladung.

Einen Platz in der Beta anfragen →

Hat es Ihnen gefallen? Probieren Sie es mit Ihren eigenen Daten.

tea führt Szenariosimulation und vierzehn weitere Analysen auf jeder CSV mit Wochendaten aus, in Minuten. Kostenlos während der Beta, auf Einladung.

An der Beta teilnehmen