Articol
Cât trafic îți trebuie ca o testare A/B să însemne ceva
Pragul statistic real pentru un test A/B valid și de ce multe site-uri din România nu-l ating. Ce faci sub prag ca să nu confunzi zgomotul cu rezultatul.
„Am schimbat un buton, părea că merge mai bine o săptămână, apoi totul a revenit la normal și nu știm ce s-a întâmplat.” Dacă ai trecut prin situația asta, problema aproape sigur n-a fost testul, ci lipsa de disciplină statistică din spatele lui. Un test rulat sub pragul necesar nu dă o incertitudine mai mare, dă un fals-pozitiv cu aparență de certitudine, ceea ce e mai periculos decât să nu fi testat deloc.
De ce majoritatea firmelor din România nu au trafic suficient
Mărimea eșantionului necesar pentru un test A/B la 95% încredere și 80% putere statistică depinde de rata de conversie de bază a paginii testate și de efectul minim pe care vrei să-l poți detecta (MDE, minimum detectable effect). Relația e pătratică, nu liniară: înjumătățirea MDE-ului cvadruplează volumul de trafic necesar, iar o rată de bază de 1% cere de circa 11 ori mai mult trafic decât una de 10% pentru același efect relativ.
Concret, la o rată de bază de 3%, aproape de media pieței din România, detectarea unui efect relativ de 10% cere aproximativ 106.000 de vizitatori per variantă. Un efect de 20% cere circa 28.000 de vizitatori per variantă. Un prag mai simplu, uzual în industrie, e minimum 5.000 de vizitatori pe săptămână și cel puțin 500 de conversii pe săptămână pe pagina testată, adică 250 per variantă.
Aceste cifre explică onest de ce puține firme din România ating pragul. Conform raportului Comisiei Europene privind Deceniul Digital 2025, sistemele CRM sunt prezente la sub 18% dintre firmele din România, față de o medie UE de circa 28,5%, iar doar circa 12% dintre IMM-urile românești vând online. Rata de conversie medie pe magazinele online din România se situează în jurul a 1%, cu variații între 1% și 3%, semnificativ sub cele peste 2% înregistrate în piețe precum UK, SUA sau Australia. Cu o rată de bază mică și trafic total redus la nivel de site, foarte puține pagini individuale ajung vreodată la volumul necesar pentru un rezultat de încredere într-un timp rezonabil.
Erorile care umflă fals-pozitivele
Chiar și cu trafic aparent suficient, testarea greșită produce concluzii greșite. Cea mai frecventă: oprirea testului prea devreme, cunoscută ca „peeking”. Verificarea repetată a rezultatelor și oprirea la primul semn de semnificație umflă rata reală de fals-pozitiv mult peste pragul nominal de 5%, pe un eșantion de 1.000 per variantă, poate depăși 20%, de patru ori mai mare decât nivelul declarat.
A doua eroare e testarea multiplă necorectată: urmărirea mai multor metrici sau segmente simultan, fără corecție statistică, crește șansa de a găsi „ceva semnificativ” din întâmplare. La 10 metrici urmărite, șansa ajunge la circa 40%, la 20, peste 64%. A treia e înțelegerea greșită a semnificației statistice: p<0,05 nu înseamnă „95% șanse ca varianta să fie mai bună”, ci că, fără niciun efect real, un rezultat la fel de extrem ar apărea doar 5% din timp. Nu spune nimic despre mărimea sau relevanța comercială a efectului, o creștere „semnificativă statistic” de 0,1 puncte procentuale poate fi complet irelevantă pentru afacere. La astea se adaugă regula independentă de eșantion: orice test trebuie rulat minimum un ciclu de business complet, 2-4 săptămâni, ca să nu confunde variația de zi a săptămânii sau sezonalitatea cu un efect real, chiar dacă pragul de eșantion pare atins mai devreme.
Un factor care distorsionează datele înainte să apuci să testezi
Bannerul de consimțământ pentru cookie-uri schimbă efectiv cifrele din Google Analytics 4, nu doar obligațiile legale. Cu Consent Mode avansat, care modelează conversiile pierdute, la o rată de refuz de 40% dintre vizitatori, modelarea recuperează circa 70% din traficul pierdut, dar rămâne un gol de circa 12% din totalul conversiilor. La 60% refuz, golul urcă la circa 27%. Cu cât refuzul e mai mare, frecvent pe piețele europene, cu atât GA4 subestimează sistematic performanța reală, iar orice decizie de testare bazată exclusiv pe el pornește de la o imagine incompletă. Google Consent Mode v2 e, de altfel, obligatoriu pentru vizitatorii din Spațiul Economic European din martie 2024, cu aplicare strictă din 2025, iar în România ANSPDCP a sancționat deja, în 2025, un site pentru plasarea de cookie-uri fără consimțământ prealabil.
Ce faci dacă ești sub prag
Aici e diferența față de o abordare care vinde A/B testing tuturor, indiferent de trafic. Sub pragul statistic, există alternative reale, nu compromisuri „mai slabe”.
Metricile proxy sau micro-conversiile, obiective cu volum mai mare decât conversia finală, click pe CTA, scroll depth, adăugare în coș, validate ulterior prin corelație cu conversia reală. Cercetarea calitativă în loc de testare cantitativă: heatmaps, înregistrări de sesiune, sondaje, care identifică fricțiuni evidente fără eșantion statistic. Un MDE mai mare, cu schimbări mai îndrăznețe în loc de micro-tweak-uri, pentru că teste cu efect așteptat mare reduc eșantionul necesar. Comparația temporală controlată (before/after), cu control explicit pentru sezonalitate și alte schimbări simultane, în loc de A/B clasic. Agregarea la nivel de tip de pagină, un test aplicat simultan pe toate paginile dintr-o categorie generează volum agregat mult mai rapid decât testarea izolată. Și, esențial, un prag explicit de reevaluare: când traficul agregat justifică testarea clasică, se trece la ea, până atunci metoda de mai sus e cea corectă pentru volumul disponibil.
Ce se întâmplă cu atribuirea pe cicluri lungi de vânzare
Chiar și când traficul e suficient pentru testare, o altă limitare afectează calitatea deciziilor: pentru B2B și servicii cu bilet mare, ciclul de vânzare tipic durează între 3 și 18 luni, iar 40-60% din parcursul cumpărătorului se petrece în canale offline sau netrackabile, apeluri, întâlniri, demo-uri. Nu e o surpriză că circa 90% dintre echipele de marketing B2B raportează probleme reale de atribuire: un model last-click supra-recompensează ultimul canal atins, adesea organic de brand, aproape gratuit, și ignoră canalul care a inițiat interesul, adesea plătit, cu cost real. Un test A/B rulat corect statistic, dar interpretat cu o atribuire ruptă, poate arăta un câștigător greșit.
Soluția practică nu e complicată, dar cere disciplină: o convenție UTM respectată de toată echipa, păstrarea sursei de prim contact cu durată de viață extinsă, 6-12 luni, aliniată la ciclul real de vânzare, nu la implicitul de 90 de zile, și câmpuri ascunse în formular care duc sursa direct în CRM, vizibilă la nivel de lead individual. Fără acest nivel de disciplină, orice concluzie de testare rămâne parțial suspectă, oricât de corect ar fi fost calculat eșantionul.
De ce contează diferența dintre a raporta activitate și a raporta rezultat
Un raport de activitate, impresii, click-uri, pageviews brute, e ușor de făcut și greu de contestat. Un raport de rezultat cere mai mult: lead-uri calificate, nu doar trimise, cost per lead calificat, rată de calificare confirmată în CRM. Diferența nu e stilistică. Raportarea de activitate ține pe cineva responsabil de volum, cea de rezultat îl ține responsabil de impact comercial, iar asta cere acces la CRM și o definiție comună, agreată în avans, de „lead calificat”.
Dacă traficul tău e sub pragul necesar pentru un test statistic valid, cel mai bun lucru pe care îl poți face nu e să testezi oricum și să tragi concluzii nesigure, ci să afli exact unde ești față de prag și ce metodă are sens pentru volumul tău real. Pagina de CRO & analiză descrie exact acest calcul, inclusiv situația în care răspunsul corect e „nu încă”.
Surse
- Digitalizarea economiei României în 2025, raport CE DESI/Deceniul Digital, Webactiv.ro
- Rate de conversie: ce sunt, cât sunt, cum se cresc, Creadiv.ro
- Optimizare Rata Conversie CRO eCommerce, Roweb Media
- A/B Test Sample Size Guide, Atticus Li
- A/B Testing Alternatives for Low-Traffic Websites, Rich Page
- A/B Testing Alternatives for Low-Traffic Websites, CXL
- A/B Testing Mistakes That Invalidate Results, MetricGate
- The more the merrier? The problem of multiple comparisons in A/B Testing, Statsig
- Correct me if I’m wrong: Navigating multiple comparison corrections in A/B Testing, Statsig
- GA4 Cookie Consent: Data You Lose When Users Opt Out, Kukie.io
- Google Consent Mode V2 Setup Guide, CookieHub
- Amendă GDPR de 10.000 EUR pentru Călin Georgescu, după ce site-ul său a folosit cookie-uri fără consimțământ, StartupCafe
Ai o situație asemănătoare?
Spune-ne în ce punct ești. Dacă răspunsul potrivit e altul decât ce ai citit aici, îți spunem.
Solicită o ofertă