Dal contatto al cliente · CRO e A/B test

A/B test landing

Ipotesi e metricaCampione e durataVariante e strumento

Dal contatto al cliente · CRO e A/B test

A/B test landing

Due versioni della stessa pagina messe a confronto con visitatori veri.

340 € per test 440 €

Prezzi di lancio, per gli ordini fino al 15 aprile 2027

Prenota

Prezzi finali. Non paghi niente adesso: dal carrello prenoti, ed è gratuito.

Si paga con bonifico, in tre rate: all'ordine, alla prima versione e alla consegna.

È compreso anche nel pacchetto Lead generation e performance marketing · Completo.

Cosa ricevi

  • Due versioni della tua pagina messe a confronto con visitatori veri
  • L'ipotesi e la regola per decidere scritte prima di cominciare
  • Il calcolo onesto di quante visite servono; se non bastano, te lo dico
  • Una pagina di report: le versioni, i numeri, la decisione, cosa ho imparato
  • La versione decisa messa online: quella che vince, o la più semplice se finisce pari
  • Il registro dei test aggiornato

Come lo faccio

Un test A/B dice qualcosa solo se l'ipotesi è scritta prima, se il campione è calcolato prima e se nessuno decide guardando i risultati a metà. Se il traffico non basta, lo dico prima di cominciare.

  1. Ipotesi e metricaScrivo l'ipotesi in una riga, la metrica principale, come l'invio del modulo, 1-2 metriche di controllo e il criterio di vittoria.Perché conta: Un criterio scelto dopo aver visto i numeri trova sempre un vincitore, anche quando non c'è.
  2. Campione e durataCalcolo le visite necessarie dal tasso attuale e dal miglioramento minimo che vale la pena vedere, poi le settimane; almeno 2 settimane intere.Perché conta: Se servono più di 8-12 settimane il test non finirà: meglio un cambiamento più grande o un confronto prima-dopo dichiarato.
  3. Variante e strumentoCostruisco la variante cambiando solo quello che l'ipotesi dice, con lo strumento di test del tuo costruttore o dividendo il traffico dalla piattaforma pubblicitaria.Perché conta: Cambiare più cose senza dirlo impedisce di sapere cosa ha funzionato.
  4. Misura e controllo prima del lancioOgni conversione porta il nome della versione vista; provo entrambe da telefono e computer, con il banner dei cookie applicato anche allo strumento di test.Perché conta: Una versione che non registra le conversioni perde il test per un guasto, non per il contenuto.
  5. Monitoraggio senza decidereUna volta a settimana controllo solo i guasti, non chi sta vincendo.Perché conta: Fermarsi al primo risultato «significativo» porta i falsi vincitori dal 5% a oltre il 25%, come mostra Evan Miller.
  6. Analisi e registroA campione raggiunto calcolo la significatività, guardo le metriche di controllo e telefono-computer, e scrivo tutto nel registro dei test, anche se il risultato è pari.Perché conta: Un test perso è comunque una lezione: senza registro si rifà lo stesso errore fra sei mesi.

Le tecniche che uso

Ipotesi «se… allora… perché…»
La forma in cui scrivo ogni test, con la prova da cui nasce: così il risultato insegna qualcosa anche se perde.
Sample size e MDE
Le visite necessarie per vedere il miglioramento minimo che ti interessa, con confidenza del 95% e potenza dell'80%.
No peeking
Non si decide prima del campione stabilito, anche se un risultato sembra già chiaro.
Significatività statistica
La verifica, con un test del chi-quadro, che la differenza non sia dovuta al caso: dichiaro un vincitore solo sotto p 0,05.
Flicker
La versione originale che lampeggia prima della variante: lo controllo, perché falsa il confronto.
Test log
Il registro di ogni test: ipotesi, varianti, numeri, risultato, cosa si è imparato.

Cosa comprende il prezzo

Sempre: Per ogni test: ipotesi e metriche scritte prima, campione e durata calcolati, una variante, la misura della versione vista, il controllo prima del lancio, il monitoraggio dei guasti, l'analisi a campione raggiunto e il registro.

Fino a: Due versioni di una pagina, una metrica principale e 2 di controllo, per la durata calcolata fino a un massimo di 8 settimane.

Se serve di più: Se il traffico non basta, propongo un confronto prima-dopo dichiarato al posto del test. Il costo dello strumento di test resta a tuo carico; test su titoli e pulsanti sono A/B test headline e A/B test pulsanti.

Non compreso: Il costo di uno strumento di test a pagamento e il budget della pubblicità che porta traffico.

La modifica compresa: Ogni servizio comprende un giro di modifiche: guardiamo insieme la prima versione, mi scrivi in un elenco quello che non va e lo riadatto. Le modifiche in più, o le cose aggiunte dopo, si pagano a parte, con il costo scritto prima, nella lettera d'incarico.

Tempi: Il test dura almeno 2 settimane intere, di solito 2-8 settimane.

La call di presentazione: Una call di presentazione per ordine, a test finito: il risultato, la decisione e il prossimo test. 20 minuti.

I controlli prima della consegna
  • Ipotesi, metrica principale e criterio di vittoria sono scritti prima.
  • Campione e durata sono calcolati e scritti nel registro.
  • Il traffico basta, oppure si è passati a un confronto dichiarato.
  • Le due versioni sono provate da telefono e da computer.
  • La misura riporta la versione vista.
  • Il banner dei cookie vale anche per lo strumento di test.
  • Nessuna decisione è presa prima del campione, e la durata è di almeno 2 settimane intere.
Gli errori che evito
  • Fermare il test appena si vede un vincitore: è il modo più sicuro di dichiararne uno falso.
  • Testare dettagli con poco traffico: il test non arriva mai a una conclusione.
  • Cambiare le campagne durante il test: arriva un traffico diverso e il confronto salta.
  • Cercare a posteriori il gruppo di visitatori in cui la variante vince: con abbastanza gruppi se ne trova sempre uno.

Della stessa categoria