A/B testi lansman sayfası yaparken sık yapılan hatalar

Kısa Cevap

A/B testi lansman sayfası yaparken en sık yaptığım hatalar şunlardı: çok az ziyaretçi ile test etmek, aynı anda birden fazla öğeyi değiştirmek, istatistiksel anlamlılığı görmezden gelmek ve test süresi çok kısa tutmak. Bu hatalardan kaçınırsanız, lansmanınızdan çok daha iyi sonuçlar alabilirsiniz.

Çok Az Ziyaretçi ile Test Etmek

İlk lansmanımda bu hatayla karşı karşıya geldim. Bekleme listesindeki 200 kişiyi iki gruba bölüp A/B testi yapmaya başlamıştım. Heyecanlı bir şekilde sonuçlara bakıyordum, ama aslında hiçbir sonuç çıkmıyordu. İstatistiksel olarak anlamlı bir sonuç almak için çok daha fazla ziyaretçiye ihtiyaç vardı.

Yeterli örneklem büyüklüğü olmadan test etmek, yanılgılı sonuçlara yol açar. Bir başlığın gerçekten daha iyi olup olmadığını anlamak için, genellikle A versiyonunda en az 100-200 dönüşüm, B versiyonunda da aynı sayıda dönüşüme ihtiyaç vardır. Sadece trafiğin sayısı değil, dönüşüm sayısının yeterli olması gerekir.

Eğer az trafiğiniz varsa, lansmandan hemen önce test etmeye başlamak yerine, bekleme listesini önceden büyütmeniz daha mantıklı. Böylece test etmek için yeterli veri elde edersiniz.

Aynı Anda Birden Fazla Öğeyi Değiştirmek

Bir başlık, bir görsel, bir buton rengi ve bir başlık altı yazısını aynı anda değiştirmiştim. B versiyonu daha iyi performans gösterdiğinde, hangi değişikliğin etkili olduğunu bilememiştim. Belki başlık değişimi işe yaramış, belki görsel, belki de hepsi birlikte.

Doğru yol, bir seferde sadece bir öğeyi değiştirmektir. Böylece hangi değişikliğin dönüşümü artırdığını net bir şekilde görebilirsiniz. Hız kesmek gibi görünse de, uzun vadede çok daha verimli bir yoldur.

Başlığı test ettikten sonra sonuç çıkınca, en iyi versiyonu sabitleyip bu sefer başlık altını test edin. Bir sonraki teste buton rengini ekleyin. Bu şekilde bir katmanla ilerlemek, her bir öğenin gerçek etkisini göstermeyi sağlar.

İstatistiksel Anlamlılığı Görmezden Gelmek

Psikolojik olarak hoşlanmadığım bir başlığın test sonuçlarında kazanmasını kabul etmek zor geldi. Bana göre daha iyi olan başlık aslında daha düşük dönüşüm oranına sahipti. Ama istatistiksel anlamlılık açısından bakıldığında, fark henüz belirgin değildi.

En az %95 güven seviyesinde (0.05 p-değeri) sonuç görmek gerekir. Bazı A/B test araçları bunu otomatik olarak hesaplar ve size "Bu test sonuç vermiş midir?" sorusunun cevabını verir. Kişisel tercihleriniz, istatistiksel veri kadar önemli değildir.

Eğer sonuç istatistiksel olarak anlamlı değilse, test süresini uzatın ve daha fazla ziyaretçi toplayın. Acele etmek, yanlış karar vermenize yol açar.

Test Süresini Çok Kısa Tutmak

Pazartesi günü teste başladığım başlığın çarşamba günü kazanmasını gördüm. Çoşkuyla bunu canlıya aldım. Ama ertesi hafta aynı başlığın performansı düşmüştü. Dış etkenler (hava durumu, haberlerdeki bir konu, sosyal medya trendleri) kısa vadede sonuçları etkileyebilir.

En az 2-3 hafta boyunca test yapın. Hafta içi ve hafta sonu trafiğini, farklı saatlardeki kullanıcı davranışını görmelisiniz. Mevsimsel ürünlerseniz, en az bir ayı beklemeniz daha iyi olur.

Ayrıca, haftanın belirli günlerinde daha yüksek dönüşüm görebilirsiniz. Tam bir hafta döngüsü görmedikçe, gerçek sonucu anlamış olmazsınız.

Sabit Olan Kısımları Değiştirmemek

İlk test heyecanımda, A ve B versiyonlarımın birbirinden çok farklı olmamasına önem vermedim. Halbuki aynı tıklanabilir buton, aynı yazı tipi, aynı renkler test kapsamı dışında kalmalıdır. Değişen tek şey, test ettiğiniz öğedir.

Her iki versiyonun da tamamen aynı şekilde tasarlanması, sadece bir değişken farklı olması gerekir. Aksi takdirde kullanıcı davranışı farklı olacak, ama sebebi ne olduğu belirsiz kalacaktır.

A/B Testi Sonrasında İş Bitmiş Sanmak

Bir test kazandığında, başlığın hep böyle olmasını sandığım için test etmeyi bıraktım. Ama dışsal koşullar her zaman değişir. Kullanıcı beklentileri gelişir, pazar değişir, rekabet artar. Geçen ayın kazanan başlığı bu ay kaybedebilir.

Lansman başarılı olsa da, bir-iki hafta sonra başlığı tekrar test etmeyi göz önünde bulundurabilirsiniz. Başka değişkenleri (görsel, açıklama metni, buton metni) sırayla test etmeye devam edin.

Sık Sorulan Sorular

Kaç ziyaretçi ile test yapmaya başlayabilirim?

Minimum 100-200 dönüşüm per versiyonda sonuç görebilirsiniz, ancak 500+ olması daha güvenilirdir. Çok az trafiğiniz varsa, test yerine bekleme listesini büyütmeye odaklanın.

Test süresi ne kadar olmalı?

En az 2-3 hafta, idealde 1 ay. Böylece hafta içi-hafta sonu farkını ve mevsimsel etkenleri görebilirsiniz.

Hangi araçları kullanmalıyım?

Lansman sayfanız basit HTML sayfası ise, Optimizely, VWO veya Convert gibi araçları kullanabilirsiniz. Landing page builder'lardan çoğunun yerleşik A/B test özelliği vardır.

Test etmek için lansmanı ertelemelisin miyim?

Lansmanınız zaten çok gecikmişse, dört gözle beklemeyi bırakın. Lansmandan 1-2 hafta önce test başlatarak, lansmanı geciktirmeden sonuçları alabilirsiniz.