MMM geo: la media nazionale che nascondeva un Nord e un Sud

Forest plot: nazionale 1,9, Nord-Ovest 1,2, Nord-Est 1,4, Centro 2,0, Sud 2,9, Isole 2,6 con un intervallo largo.
Dati illustrativi per un caso composito.

Marchio italiano di caffè confezionato, €1,8M all’anno di radio e video online regionali, si chiede se continuare a dividerli in base alla popolazione.

Un caso composito, costruito sul tipo di file che vediamo quasi ogni settimana. Un marchio italiano di caffè confezionato venduto nella grande distribuzione, con la TV nazionale come canale principale e €1,8M all’anno di media regionali in più: radio locali e video online comprati regione per regione.

I soldi regionali erano sempre stati divisi in base alla popolazione. Il Nord-Ovest prendeva il 27%, il Sud il 23%, le Isole l’11%, e così via. Un modello nazionale aveva stimato il ritorno di quella spesa regionale a €1,9 di ricavi per euro, che andava bene, e la domanda di pianificazione era se rifare la stessa cosa. Ci è arrivata così: «I media regionali in media funzionano. C’è un motivo per non dividerli allo stesso modo l’anno prossimo?»

Com’erano i dati

Una riga per regione per settimana. Quattro aree, Nord-Ovest, Nord-Est, Centro e Sud, con 104 settimane ciascuna. Una quinta, le Isole, con sole 38 settimane, perché la distribuzione in Sicilia e Sardegna era partita tardi. 454 righe in tutto.

Ogni riga riportava ricavi, spesa regionale nei media, i GRP TV effettivamente erogati in quella regione, prezzo a scaffale, profondità di sconto e distribuzione ponderata. La spesa regionale aveva variato nel tempo dentro ogni regione, con flight e pause, quindi ogni regione aveva qualcosa da cui imparare.

Cosa ha fatto l’analisi

L’MMM geo / per segmento stima lo stesso modello in ogni regione, ma non come cinque modelli separati. Usa il partial pooling. Ogni regione ha la sua stima, e ogni stima viene tirata verso quella nazionale di una misura che dipende da quanto possono dire i dati della regione. Una regione con due anni di spesa variata parla soprattutto per sé. A una regione con pochi mesi viene detto soprattutto cosa pensa il paese, e le è permesso di discostarsene solo quanto i suoi dati insistono.

Il modello stima anche quanto le regioni differiscano davvero, una dispersione che di solito si chiama tau. Se tau esce vicino a zero, le regioni sono di fatto lo stesso mercato e il numero nazionale è quello giusto ovunque. Qui tau è uscito a 0,7 euro per euro, contro un ritorno nazionale di 1,9. È una differenza reale, non una decorazione.

I risultati con il pooling, ricavi per euro di media regionali con intervalli al 95%:

  • Nord-Ovest: 1,2 (da 0,8 a 1,6);
  • Nord-Est: 1,4 (da 1,0 a 1,8);
  • Centro: 2,0 (da 1,4 a 2,6);
  • Sud: 2,9 (da 2,2 a 3,6);
  • Isole: 2,6 (da 1,3 a 3,9).

L’1,9 nazionale era un numero vero che non descriveva nessuna regione in particolare. Il Sud rendeva più del doppio del Nord-Ovest. Il file non sa dire perché, e io starei attento alle storie. Più ascolto della radio, un marchio ancora in costruzione al Sud e conosciuto da tempo al Nord: tutto plausibile, niente nei dati.

Barre affiancate: le stime cambiano appena per quattro regioni, mentre le Isole scendono da 4,6 a 2,6 con il pooling.
Barre affiancate: le stime cambiano appena per quattro regioni, mentre le Isole scendono da 4,6 a 2,6 con il pooling. Dati illustrativi per un caso composito.

Quando una regione è troppo sottile per stare in piedi da sola

Le Isole sono la riga che insegna. Stimate da sole, su 38 settimane, uscivano a 4,6 per euro, con un intervallo da 0,8 a 8,4. Preso alla lettera, ne avrebbe fatto il posto migliore d’Italia in cui spendere, e il piano successivo le avrebbe raddoppiate.

Il partial pooling le ha portate a 2,6, con un intervallo largo circa un terzo. Non perché si sia supposto che le Isole fossero nella media, ma perché 38 settimane potevano mettere in minoranza solo in parte due anni di evidenze dal resto del paese. Le quattro regioni grandi con il pooling si sono mosse appena, di 0,1 al massimo, perché i loro dati erano abbastanza forti da tenere la posizione. Questa asimmetria è il punto: il metodo restringe ciò che è incerto e lascia stare ciò che non lo è.

Il verdetto

Qui l’analisi serve, con una sfumatura. La divisione regionale è cambiata: €230k all’anno spostati da Nord-Ovest e Nord-Est verso Sud e Centro, con limiti del 30% per regione così che il piano restasse nella fascia che ogni regione aveva visto. Proiettato sui ritorni regionali, sono circa €370k di ricavi in più all’anno, e circa €180k se ogni regione sta all’estremo basso del suo intervallo.

Le Isole sono rimaste alla loro quota di popolazione, non sono state alzate. Il loro 2,6 con il pooling è incoraggiante, ma il suo intervallo arriva ancora a 1,3, e altre 26 settimane diranno più di quanto un modello possa dire adesso. Se il marchio vuole una risposta prima, un test con regione di controllo lì costa poco ed è rapido.

La riallocazione sarà letta come è stato letto il piano del pet food: un trimestre dopo, regione per regione, contro l’estremo basso della sua forbice. È l’ultimo passo, facoltativo, della Storia dell’efficacia dei media, perché non tutti i file hanno una colonna regione. Quando ce l’hanno, spesso è lì che si nasconde lo spostamento più grande.

La lezione

Una media è un riassunto onesto solo quando le parti sono d’accordo. Se il tuo file ha delle regioni, chiedi quanto differiscono prima di pianificare sul numero nazionale, e lascia che le regioni sottili prendano forza dal paese invece di lasciare che il loro rumore fissi il budget.

tea, il prodotto

Il tuo file, questa domanda

Quindici analisi su un CSV di dati settimanali, con intervalli e diagnostica in vista, e una frase chiara quando i dati non possono rispondere. Gratis durante la beta, su invito.

Chiedi un posto nella beta

tea, il prodotto

Quindici analisi econometriche sul tuo CSV: MMM geo / per segmento, curve di saturazione, elasticità, allocazione del budget. Intervalli e diagnostica in vista, e una frase chiara quando il file non può rispondere.

Gratis durante la beta, su invito.

Chiedi un posto nella beta →

Ti è piaciuto? Eseguilo sui tuoi dati.

tea esegue MMM geo / per segmento e altre quattordici analisi su qualsiasi CSV settimanale, in pochi minuti. Gratis durante la beta, su invito.

Entra nella beta