Leggere uno scenario simulato dentro il suo intervallo

Il grafico del post: Leggere uno scenario simulato dentro il suo intervallo.
Così come è uscito su LinkedIn. Dati: campione app mobile, 104 settimane di installazioni e nove driver.

Due barre. Google Ads più 25% guadagna 209 installazioni a settimana. Meta Ads meno 25% ne perde 149. Netto, +60.

Questo è tutto lo scenario, e detto così sembra un sì facile.

Ecco la frase che deve stargli accanto: il netto sta dentro il suo stesso intervallo di confidenza, che va da -144 a +258.

In altre parole, l’esito più probabile di questa riallocazione è un piccolo guadagno, e i dati non possono escludere una piccola perdita. Il piano non è sbagliato. È non dimostrato, e sono due cose diverse che nella maggior parte delle presentazioni vengono trattate allo stesso modo.

Cosa fare con un risultato così, perché raramente anche «non fare niente» è la risposta giusta.

Fai la mossa se costa poco farla e costa poco tornare indietro. Uno spostamento del 25% tra due canali digitali è entrambe le cose. Il valore atteso è leggermente positivo, il rischio è limitato, e dal prossimo trimestre di dati imparerai qualcosa sulle curve.

Non costruirci sopra un obiettivo. Niente che abbia bisogno di +60 installazioni a settimana per essere vero dovrebbe stare in un piano in cui +60 potrebbe essere -144.

Sposta un quarto del budget, e guarda la banda. 26 settimane avanti · business as usual contro +25% Google, −25% Meta, stessa spesa totale
La stessa analisi da un’altra angolazione. È il grafico di Simulazione di scenari: provare uno spostamento di budget prima.

E tratta il risultato come un’istruzione sulla misurazione più che sui media. Un modello che non riesce a distinguere due dei suoi canali ti sta dicendo che i loro andamenti di spesa sono troppo simili per separarli. Pianifica i loro flight in modo diverso per un trimestre e la stima successiva avrà qualcosa da leggere.

L’abitudine più profonda è questa. Uno strumento di scenario che restituisce sempre un numero sicuro di sé non è uno strumento: è una slot machine con una bella tipografia. Il valore della simulazione sta proprio nei casi in cui dice che la differenza è dentro il rumore, perché sono i casi in cui un piano sicuro di sé sarebbe costato soldi veri senza nessun ritorno atteso.

L’output più utile di un modello è spesso un’alzata di spalle con un numero attaccato.

Un ultimo punto su come lo si presenta, perché è la presentazione a decidere cosa ne sarà. Metti l’intervallo nella stessa frase della stima puntuale, sempre, e con lo stesso corpo del carattere. Ogni convenzione del reporting aziendale spinge nella direzione opposta: il numero va nel titolo e l’incertezza in una nota a piè di pagina che nessuno legge.

I team che diventano bravi in questo finiscono per avere un vocabolario comune. Mosse che vale la pena fare e che costa poco annullare. Mosse da testare prima di scalarle. Mosse che i dati non sostengono affatto. Tre categorie, e un grafico di scenario con la sua banda è ciò che mette una proposta in una delle tre.

Il grafico è l’output reale di Simulazione di scenari in TEA, ottenuto da un file di esempio che chiunque può scaricare.

tea, il prodotto

Il tuo file, questa domanda

Quindici analisi su un CSV di dati settimanali, con intervalli e diagnostica in vista, e una frase chiara quando i dati non possono rispondere. Gratis durante la beta, su invito.

Chiedi un posto nella beta

tea, il prodotto

Quindici analisi econometriche sul tuo CSV: Simulazione di scenari, curve di saturazione, elasticità, allocazione del budget. Intervalli e diagnostica in vista, e una frase chiara quando il file non può rispondere.

Gratis durante la beta, su invito.

Chiedi un posto nella beta →

Ti è piaciuto? Eseguilo sui tuoi dati.

tea esegue Simulazione di scenari e altre quattordici analisi su qualsiasi CSV settimanale, in pochi minuti. Gratis durante la beta, su invito.

Entra nella beta