Analizzare i risultati di un test A/B e decidere con metodo
Interpreta un test A/B con rigore: controlli preliminari, tassi di conversione, uplift, intervallo di confidenza e p-value, rilevanza pratica e una raccomandazione chiara per il team. Pensato per ChatGPT, Claude, Gemini e Microsoft Copilot. Include 5 variabili personalizzabili e puoi copiarlo gratuitamente con un clic.
Avanzato · Testo · In attesa di revisione editoriale
Prompt
Agisci come analista di sperimentazione con solide basi statistiche. Spieghi i risultati in modo che un team non tecnico possa decidere, senza esagerare ciò che dicono i dati.
Dati del test:
- Cosa è stato testato e qual era l'ipotesi: {{descrizione_test}}
- Risultati per variante (utenti o sessioni e conversioni): {{risultati}}
- Metrica principale: {{metrica}}
- Durata e date: {{durata}}
- Livello di confidenza concordato: {{confidenza}}
Se manca la dimensione di una variante, l'unità di randomizzazione o la durata, chiedimelo prima di calcolare.
Consegne:
1. Controlli preliminari: squilibrio del campione (sample ratio mismatch), durata in settimane complete, modifiche durante il test, eventuali sbirciate anticipate ed effetto novità.
2. Tasso di conversione per variante, differenza assoluta e uplift relativo.
3. Un test per due proporzioni: statistica z, p-value e intervallo di confidenza della differenza, mostrando formule e passaggi.
4. Interpretazione: significatività statistica contro rilevanza pratica (il cambiamento vale la pena?) e potenza approssimativa se il campione sembra piccolo.
5. Avvertenze sulla segmentazione a posteriori e sulle metriche secondarie o di controllo (per esempio scontrino medio o tasso di resi).
6. Decisione consigliata: rilasciare, iterare o continuare a raccogliere dati, con motivo e rischio di ciascuna opzione.
7. Un riepilogo di 5 righe per il team e un elenco di insegnamenti per il prossimo test.
Vincoli:
- Non inventare numeri né risultati di segmenti che non ti ho dato: usa [DA COMPLETARE].
- Indica le ipotesi (indipendenza, randomizzazione corretta) e che i calcoli vanno verificati con un calcolatore statistico o con codice.
- Se i dati non permettono di concludere, dillo chiaramente.
Formato: tabella dei risultati, blocco di calcolo e riepilogo finale.Come usarlo
Esporta dallo strumento di sperimentazione utenti e conversioni per variante. Incolla anche l'ipotesi iniziale, così l'interpretazione resta legata a ciò che volevi testare.
Esempio d'uso
Test: pulsante di acquisto verde contro arancione · Risultati: A 10.240 utenti e 512 acquisti, B 10.180 utenti e 571 acquisti · Metrica: conversione all'acquisto · Durata: 14 giorni.
Esempio di risultato
Controlli preliminari
- Ripartizione 50,1 % / 49,9 %: nessuno squilibrio evidente del campione.
- 14 giorni = due settimane complete. ✔
- Modifiche durante il test o controlli quotidiani dei risultati? [DA COMPLETARE]
Risultati
| Variante | Utenti | Acquisti | Conversione |
|---|---|---|---|
| A (controllo) | 10.240 | 512 | 5,00 % |
| B (recensioni in alto) | 10.180 | 571 | 5,61 % |
Differenza assoluta: +0,61 pp · incremento relativo: +12,2 %
Test su due proporzioni
p_aggregata = (512 + 571) / (10.240 + 10.180) = 0,0530
ES = √[p(1−p)(1/nA + 1/nB)] = 0,00314
z = 0,00609 / 0,00314 = 1,94
p ≈ 0,052 (bilaterale)
IC 95 % della differenza: da −0,01 pp a +1,22 pp
Interpretazione
Al livello di confidenza concordato del 95 %, il risultato non è statisticamente significativo: l'intervallo include lo zero, di pochissimo. Il segnale è promettente, ma i dati non permettono di dichiarare vincente B.
Decisione consigliata
Continuare a raccogliere dati per una o due settimane complete, senza modifiche, e controllare le metriche di guardia (scontrino medio, resi). Rilasciare ora significa accettare il rischio che il miglioramento reale sia nullo.
Ipotesi: utenti indipendenti e randomizzazione corretta. Da verificare con un calcolatore statistico. …
Dati chiave
- Categoria
- Gestione dei dati · Analisi dei dati
- Tipo di output
- Testo
- Livello
- Avanzato
- Pensato per
- ChatGPT, Claude, Gemini e Microsoft Copilot
- Verificato in
- In attesa di verifica editoriale
- Variabili
- Cosa è stato testato, Risultati per variante, Metrica principale, Durata e Livello di confidenza
- Lingua
- Italiano
- Prezzo
- Gratuito, senza registrazione
- Aggiornato
- 07/11/2026
Domande frequenti
Cos'è il sample ratio mismatch?
È quando la ripartizione reale degli utenti tra le varianti si discosta molto da quella prevista (per esempio 50/50). Di solito indica un problema tecnico e può invalidare il risultato.
Se il p-value è sotto 0,05 posso già rilasciare?
Non necessariamente. Conta anche che il miglioramento sia rilevante per il business, che il test sia durato abbastanza e che le metriche di controllo non peggiorino.
A cosa serve questo prompt?
Interpreta un test A/B con rigore: controlli preliminari, tassi di conversione, uplift, intervallo di confidenza e p-value, rilevanza pratica e una raccomandazione chiara per il team.
Con quali strumenti di IA funziona?
È pensato per ChatGPT, Claude, Gemini e Microsoft Copilot. Non lo abbiamo ancora verificato in questi strumenti, quindi i risultati possono variare da uno all'altro.
Come personalizzo il prompt?
Clicca su «Personalizza» e compila le variabili (Cosa è stato testato, Risultati per variante, Metrica principale, Durata e Livello di confidenza). Il testo si aggiorna all'istante e poi puoi copiarlo con un clic. I valori vengono salvati solo nel tuo browser.
Serve esperienza per usarlo?
È di livello avanzato: è pensato per persone con esperienza nell'argomento, in grado di valutare e regolare il risultato.
Questo prompt è gratuito?
Sì. Tutti i prompt di HomeCasa Prompts sono gratuiti, senza registrazione né abbonamento. Puoi usarli anche in progetti professionali.
Posso fidarmi dell'output dell'IA?
Consideralo una bozza di alta qualità: verifica sempre dati, cifre e affermazioni importanti prima di pubblicare o prendere decisioni.