Bir ürün sayfası aynı anda birçok şekilde değiştirilebilir, yeni bir fotoğraf, daha kısa bir açıklama, farklı bir buton rengi, ama birkaç şeyi birlikte değiştirip sonra sonucu eski sayfayla karşılaştırmak, hangi değişikliğin gerçekte daha iyi ya da daha kötü bir sonuca neden olduğunu bilmenin hiçbir yolunu bırakmaz. Bir test, yalnızca test edilen tek şey dışında her şey aynı kaldığında bir şey kanıtlar.
Bu ders, bir fabrika veya perakendecinin ondan herhangi bir sonuç çıkarmadan önce adil, tek değişkenli bir test kurmak için kullandığı yöntemi verir. Bunu Delta Garments'ın kendi çevrimiçi fabrika satış mağazasına, Sipariş A tarzı ikinci kalite bir tişört için yeni bir ürün fotoğrafını mevcut fotoğrafa karşı test ederek uygulayacaksınız; çünkü birden fazla değişikliğin karıştığı bir test, kimseye dürüstçe hangi değişikliğin işe yaradığını söyleyemez.
İhtiyacınız olan: Ders 2.1'den, bir ürün sayfasının kendi referans dönüşüm oranını doğru okuma fikri, arka plan olarak faydalıdır ama zorunlu değildir.
Bu dersin sonunda şunları yapabileceksiniz:
Bu derste ele alınmayan: tamamlanmış bir testin sonucunun gerçek mi yoksa sıradan gürültü mü olduğuna karar vermek (Ders 2.3), veya zaten bol trafik alan ama zayıf dönüşen bir sayfayı teşhis etmek (Ders 2.4). Bu ders yalnızca bir testin çalışmadan önce doğru şekilde nasıl kurulacağını öğretir.
| Terim | Anlamı |
|---|---|
| Tek değişkenli test | Kontrol ile test varyantı arasında bir sayfanın tam olarak tek bir öğesinin değiştiği, böylece sonuçtaki herhangi bir farkın yalnızca o öğeye atfedilebildiği bir test. |
| Test varyantı | Bir testte karşılaştırılan bir sayfanın iki veya daha fazla rakip versiyonundan biri. |
| Kontrol koşulu | Test edilen tek değişken dışında her faktörü iki versiyon arasında aynı tutmak, böylece karşılaştırma o tek değişkeni izole eder. |
| Karıştırıcı etken | Bir testle aynı anda meydana gelen ve sonuçtaki bir değişikliği de açıklayabilecek başka herhangi bir değişiklik. |
| Trafik bölünmesi | Gelen ziyaretçilerin kontrol versiyonu ile test varyantı arasında bölünme şekli, genellikle mümkün olduğunca eşite yakın. |
| Canlı sayfa | Test sırasında bir ziyaretçiye gerçekten gösterilen sayfa versiyonu, ister kontrol ister test varyantı, trafik bölünmesine göre kararlaştırılır. |
| Test dönemi | Bir testin sonucu okunmadan önce çalıştığı sabit süre, önceden kararlaştırılmış ve yarıda uzatılmamış ya da kısaltılmamış. |
Fotoğrafı ve fiyatı aynı anda değiştirip ardından yeni versiyonda daha yüksek bir dönüşüm oranı görmek, sonucu fotoğrafın mı, fiyatın mı, yoksa ikisinin bir bileşiminin mi ürettiğini bilmenin hiçbir yolunu bırakmaz, çünkü artık aynı tek rakam için iki açıklama yarışır.
| Neyin değişebileceği | Karşılaşacağınız biçimler | Sizin için neden önemli |
|---|---|---|
| İş modeli | Delta Garments'ın kendi mağazası gibi sipariş üzerine üretim yapan bir fabrika satış mağazası her seferinde tek bir stili test eder, çünkü herhangi bir stilin stoğu sınırlıdır ve sonsuza kadar tekrarlanmaz. Kalıcı bir stili yöneten stoğa üretim yapan bir perakendeci daha uzun bir test yürütebilir, çünkü aynı stil boyunca mevcut kalır. | Test dönemi ve trafik bölünmesi, ürünün gerçekte ne kadar süre satışta kalacağına uymalıdır. |
| Pazar | Aynı anda birden fazla ülkeye hizmet veren ihracatçı bir markanın çevrimiçi mağazası, satın alma davranışı ülkeye göre farklılık gösteriyorsa trafiği her ülkede ayrı ayrı bölmelidir, tüm ülkeleri tek bir birleşik sonuçta toplamak yerine. | Farklı pazarları tek bir testte birleştirmek, yalnızca birinde geçerli olan bir sonucu gizleyebilir. |
| Trafik hacmi | Yüksek günlük trafiğe sahip bir sayfa birkaç gün içinde güvenilir bir bölünmeye ulaşabilir. Delta Garments'ın ikinci kalite mağazası gibi daha düşük trafikli bir mağaza sayfası, her varyantta anlamlı olacak kadar yeterli ziyaret toplamak için daha uzun bir test dönemine ihtiyaç duyar. | Daha düşük trafik tek değişkenli bir testi yanlış yapmaz; güvenilir bir sonuç üreten test dönemini uzatır. |
| Test edilen varyant sayısı | İki versiyonu test etmek trafiği ikiye böler; aynı anda üç veya dört fotoğraf seçeneğini test etmek aynı trafiği daha da böler, bu yüzden her varyant aynı dönemde daha az ziyaret toplar. | Aynı anda test edilen daha fazla varyant, her karşılaştırmayı güvenilir tutmak için orantılı olarak daha fazla toplam trafik veya daha uzun bir dönem gerektirir. |
Delta Garments, Northline Apparel'in ihracat standardını karşılamayan ama yerel olarak daha düşük bir fiyata satılacak kadar sağlam olan Sipariş A tarzı ikinci kalite tişörtler satan küçük bir çevrimiçi fabrika satış mağazası işletir. Dijital ekip, manken üzerinde yeni bir ürün fotoğrafının mevcut düz stüdyo fotoğrafından daha iyi dönüşüp dönüşmediğini bilmek ister.
Sayfadaki her şey iki versiyon arasında tamamen aynı kalır: aynı fiyat, aynı ürün açıklaması, aynı sayfa düzeni ve aynı iki haftalık dönem, gelen ziyaretçiler mevcut stüdyo fotoğrafı (kontrol) ile yeni manken fotoğrafı (test varyantı) arasında kabaca %50/%50 bölünür.
Hesaplanan rakamYolun ortasında oranı ayarlamadan iki hafta boyunca korunan eşit bir bölünme, daha sonra her varyantın kendi dönüşüm oranının eşit koşullarda karşılaştırılmasını sağlayan şeydir; testin ortasında bölünmeyi değiştirmek kendisi bir karıştırıcı etken haline gelirdi.
Test varyantının sayfasında tesadüfen fark ettiği bir yazım hatasını, kontrol sayfasında aynı düzeltmeyi yapmadan düzelten bir ekip, değişiklik küçük ve gerçekte test edilen fotoğrafla tamamen ilgisiz görünse bile, tek değişkenli olması gereken bir teste sessizce ikinci bir değişken sokmuş olur. Bu hatanın maliyeti düzeltmenin kendisi değildir, ki o kendi başına zararsızdı; testin tüm sonucunun kullanılamaz hale gelmesidir, çünkü artık kimse fotoğrafın mı, düzeltmenin mi, yoksa ikisinin bir karışımının mı sonucu ürettiğini dürüstçe söyleyemez, bu da testin tükettiği iki haftalık trafiğin tamamını boşa harcar ve tüm karşılaştırmanın baştan tekrarlanmasını gerektirir.
Yeni bir fotoğrafın eskisinden daha iyi sattığını bilmek istiyorsanız, yalnızca fotoğrafı değiştirin ve sayfadaki her şeyi tam olarak aynı bırakın. Ziyaretçilerinizi eski versiyon ile yeni versiyon arasında eşit şekilde bölün ve bu bölünmeyi test başlamadan önce kararlaştırılmış sabit bir dönem boyunca koruyun. Test çalışırken her iki versiyonda da başka hiçbir şeyi düzeltmeyin, ayarlamayın veya iyileştirmeyin, küçük ve ilgisiz bir şey olsa bile, çünkü herhangi bir ikinci değişiklik, sonucu yalnızca fotoğrafın nedeniyle olduğunu söyleme yeteneğinizi mahveder.
Yeni manken fotoğrafının mevcut stüdyo fotoğrafına karşı iki haftalık testinin ortasında, bir ekip üyesi yeni fotoğraf dosyasının daha küçük olduğunu ve yavaş bir mobil bağlantıda gözle görülür şekilde daha hızlı yüklendiğini fark eder, bu tamamen nasıl dışa aktarıldığından kaynaklanır, kimsenin bir hız değişikliği amaçlamasından değil.
Delta Garments testin nihai sonucunu, manken fotoğrafının kendisinin daha iyi dönüştüğünün kanıtı olarak ele almalı mı? Cevabı açmadan önce karar verin.
Hayır. Dosya boyutu ve yükleme hızındaki amaçlanmamış fark bir karıştırıcı etkendir; test artık fotoğrafın kendi görsel etkisini daha hızlı yükleme süresinden izole edemez.
1. Tek değişkenli bir test, diğer her faktörün eşit tutulmasını gerektirir, ve yükleme hızı, özellikle yavaş mobil bağlantılarda, fotoğrafın gösterdiğinden bağımsız olarak dönüşümü değiştirebilecek bir faktördür. 2. Ziyaretçilerin üçte biri bu farkın önemli olacak kadar büyük olduğu bağlantılardadır, bu yüzden göz ardı edilecek önemsiz bir yuvarlama hatası değildir. 3. Dürüst yanıt, karıştırıcı etkeni not etmek, her iki görseli de eşit dosya boyutunda yeniden dışa aktarmak ve testi yeniden çalıştırmaktır, iki nedeni karıştırıp tek birini kanıtlamış gibi bir sonuç bildirmek yerine.
Sipariş A'nın tişörtü parça başına 19,90 ABD doları mağaza fiyatı taşır, ancak Delta Garments'ın kendi ikinci kalite mağazası aynı stili bu fiyatın yaklaşık %60'ına, parça başına 11,94 ABD doları'na indirimli satar (docs/02 bölüm 7 tam fiyat rakamını sabitler). Karıştırılmış bir test yanlışlıkla manken fotoğrafına, aslında daha hızlı yükleme süresinden kaynaklanan bir sonucu atfetseydi ve Delta Garments diğer sayfalardaki temel hız farkını düzeltmeden fotoğrafı yaygınlaştırsaydı:
Küçük bir haftalık rakam, yanlış bir dersin uygulanmaya devam ettiği her hafta sessizce birikir, temiz bir yeniden testin alacağı tek bir ekstra haftadan çok daha büyük gerçek bir maliyettir.
T23-C02 Dijital analitik ve test çalışma sayfasının "Test kurulum günlüğü" sayfasını kullanın. Her test için, değiştirilen tek değişkeni, sabit tutulanı, trafik bölünmesini, test dönemini ve test çalışırken fark edilen herhangi bir karıştırıcı etkeni kaydedin. Yukarıdaki Delta Garments örneğiyle başlayın, ardından kendi testinizi ekleyin.
[Dijital analitik ve test çalışma sayfasını indirin](../../templates/T23-C02-digital-analytics-and-testing-worksheet.xlsx)
Dijital analitik ve test çalışma sayfası dosyasını indirin (Excel)
1. Fotoğrafı ve fiyatı aynı anda değiştirmek, bir testin sonucunu neden tam olarak yorumlanamaz hale getirir?
2. Delta Garments'ın test varyantı fotoğrafı, testle ilgisi olmayan nedenlerle yavaş bağlantılarda kontrol fotoğrafından tesadüfen daha hızlı yükleniyor. Ekip ne yapmalı?
3. Bir testin trafik bölünmesi ve dönemi neden erken sonuçlar gelmeye başladığında ayarlanmak yerine önceden sabitlenmelidir?
| TR | EN | AR | FR | Anlamı |
|---|---|---|---|---|
| Tek değişkenli test | One-variable test | اختبار متغيّر واحد | Test à une seule variable | Kontrol ile test varyantı arasında bir sayfanın tam olarak tek bir öğesinin değiştiği, böylece sonuçtaki herhangi bir farkın yalnızca o öğeye atfedilebildiği bir test. |
| Test varyantı | Test variant | متغيّر الاختبار | Variante testée | Bir testte karşılaştırılan bir sayfanın iki veya daha fazla rakip versiyonundan biri. |
| Kontrol koşulu | Control condition | شرط الضبط | Condition de contrôle | Test edilen tek değişken dışında her faktörü iki versiyon arasında aynı tutmak, böylece karşılaştırma o tek değişkeni izole eder. |
| Karıştırıcı etken | Confounding factor | عامل مربك | Facteur confondant | Bir testle aynı anda meydana gelen ve sonuçtaki bir değişikliği de açıklayabilecek başka herhangi bir değişiklik. |
| Trafik bölünmesi | Traffic split | تقسيم الزيارات | Répartition du trafic | Gelen ziyaretçilerin kontrol versiyonu ile test varyantı arasında bölünme şekli, genellikle mümkün olduğunca eşite yakın. |
| Canlı sayfa | Live page | الصفحة المباشرة | Page en direct | Test sırasında bir ziyaretçiye gerçekten gösterilen sayfa versiyonu, ister kontrol ister test varyantı, trafik bölünmesine göre kararlaştırılır. |
| Test dönemi | Test period | فترة الاختبار | Période de test | Bir testin sonucu okunmadan önce çalıştığı sabit süre, önceden kararlaştırılmış ve yarıda uzatılmamış ya da kısaltılmamış. |
Bir sonraki derste tamamlanmış bir testin kendi iki sonucunu alıp aralarındaki farkın güvenilecek kadar büyük mü, yoksa sıradan gürültü olacak kadar küçük mü olduğuna karar vereceksiniz. Kurs haritasına dön