Analizzare i risultati di un test A/B e decidere con metodo

Interpreta un test A/B con rigore: controlli preliminari, tassi di conversione, uplift, intervallo di confidenza e p-value, rilevanza pratica e una raccomandazione chiara per il team. Pensato per ChatGPT, Claude, Gemini e Microsoft Copilot. Include 5 variabili personalizzabili e puoi copiarlo gratuitamente con un clic.

Avanzato · Testo · In attesa di revisione editoriale

Prompt

Agisci come analista di sperimentazione con solide basi statistiche. Spieghi i risultati in modo che un team non tecnico possa decidere, senza esagerare ciò che dicono i dati.

Dati del test:
- Cosa è stato testato e qual era l'ipotesi: {{descrizione_test}}
- Risultati per variante (utenti o sessioni e conversioni): {{risultati}}
- Metrica principale: {{metrica}}
- Durata e date: {{durata}}
- Livello di confidenza concordato: {{confidenza}}

Se manca la dimensione di una variante, l'unità di randomizzazione o la durata, chiedimelo prima di calcolare.

Consegne:
1. Controlli preliminari: squilibrio del campione (sample ratio mismatch), durata in settimane complete, modifiche durante il test, eventuali sbirciate anticipate ed effetto novità.
2. Tasso di conversione per variante, differenza assoluta e uplift relativo.
3. Un test per due proporzioni: statistica z, p-value e intervallo di confidenza della differenza, mostrando formule e passaggi.
4. Interpretazione: significatività statistica contro rilevanza pratica (il cambiamento vale la pena?) e potenza approssimativa se il campione sembra piccolo.
5. Avvertenze sulla segmentazione a posteriori e sulle metriche secondarie o di controllo (per esempio scontrino medio o tasso di resi).
6. Decisione consigliata: rilasciare, iterare o continuare a raccogliere dati, con motivo e rischio di ciascuna opzione.
7. Un riepilogo di 5 righe per il team e un elenco di insegnamenti per il prossimo test.

Vincoli:
- Non inventare numeri né risultati di segmenti che non ti ho dato: usa [DA COMPLETARE].
- Indica le ipotesi (indipendenza, randomizzazione corretta) e che i calcoli vanno verificati con un calcolatore statistico o con codice.
- Se i dati non permettono di concludere, dillo chiaramente.

Formato: tabella dei risultati, blocco di calcolo e riepilogo finale.

Come usarlo

Esporta dallo strumento di sperimentazione utenti e conversioni per variante. Incolla anche l'ipotesi iniziale, così l'interpretazione resta legata a ciò che volevi testare.

Esempio d'uso

Test: pulsante di acquisto verde contro arancione · Risultati: A 10.240 utenti e 512 acquisti, B 10.180 utenti e 571 acquisti · Metrica: conversione all'acquisto · Durata: 14 giorni.

Esempio di risultato

Controlli preliminari

  • Ripartizione 50,1 % / 49,9 %: nessuno squilibrio evidente del campione.
  • 14 giorni = due settimane complete. ✔
  • Modifiche durante il test o controlli quotidiani dei risultati? [DA COMPLETARE]

Risultati

VarianteUtentiAcquistiConversione
A (controllo)10.2405125,00 %
B (recensioni in alto)10.1805715,61 %

Differenza assoluta: +0,61 pp · incremento relativo: +12,2 %

Test su due proporzioni

p_aggregata = (512 + 571) / (10.240 + 10.180) = 0,0530
ES  = √[p(1−p)(1/nA + 1/nB)] = 0,00314
z   = 0,00609 / 0,00314 = 1,94
p   ≈ 0,052 (bilaterale)
IC 95 % della differenza: da −0,01 pp a +1,22 pp

Interpretazione

Al livello di confidenza concordato del 95 %, il risultato non è statisticamente significativo: l'intervallo include lo zero, di pochissimo. Il segnale è promettente, ma i dati non permettono di dichiarare vincente B.

Decisione consigliata

Continuare a raccogliere dati per una o due settimane complete, senza modifiche, e controllare le metriche di guardia (scontrino medio, resi). Rilasciare ora significa accettare il rischio che il miglioramento reale sia nullo.

Ipotesi: utenti indipendenti e randomizzazione corretta. Da verificare con un calcolatore statistico. …

Dati chiave

Categoria
Gestione dei dati · Analisi dei dati
Tipo di output
Testo
Livello
Avanzato
Pensato per
ChatGPT, Claude, Gemini e Microsoft Copilot
Verificato in
In attesa di verifica editoriale
Variabili
Cosa è stato testato, Risultati per variante, Metrica principale, Durata e Livello di confidenza
Lingua
Italiano
Prezzo
Gratuito, senza registrazione
Aggiornato
07/11/2026

Domande frequenti

Cos'è il sample ratio mismatch?

È quando la ripartizione reale degli utenti tra le varianti si discosta molto da quella prevista (per esempio 50/50). Di solito indica un problema tecnico e può invalidare il risultato.

Se il p-value è sotto 0,05 posso già rilasciare?

Non necessariamente. Conta anche che il miglioramento sia rilevante per il business, che il test sia durato abbastanza e che le metriche di controllo non peggiorino.

A cosa serve questo prompt?

Interpreta un test A/B con rigore: controlli preliminari, tassi di conversione, uplift, intervallo di confidenza e p-value, rilevanza pratica e una raccomandazione chiara per il team.

Con quali strumenti di IA funziona?

È pensato per ChatGPT, Claude, Gemini e Microsoft Copilot. Non lo abbiamo ancora verificato in questi strumenti, quindi i risultati possono variare da uno all'altro.

Come personalizzo il prompt?

Clicca su «Personalizza» e compila le variabili (Cosa è stato testato, Risultati per variante, Metrica principale, Durata e Livello di confidenza). Il testo si aggiorna all'istante e poi puoi copiarlo con un clic. I valori vengono salvati solo nel tuo browser.

Serve esperienza per usarlo?

È di livello avanzato: è pensato per persone con esperienza nell'argomento, in grado di valutare e regolare il risultato.

Questo prompt è gratuito?

Sì. Tutti i prompt di HomeCasa Prompts sono gratuiti, senza registrazione né abbonamento. Puoi usarli anche in progetti professionali.

Posso fidarmi dell'output dell'IA?

Consideralo una bozza di alta qualità: verifica sempre dati, cifre e affermazioni importanti prima di pubblicare o prendere decisioni.

Prompt correlati