محتويات الدورة
Practitioner · الدورة 2: التحليلات الرقمية والاختبار · الدرس 2 من 5

إعداد اختبار A/B يعزل فعليًا متغيرًا واحدًا

المستوى: Advancedالوقت: 45 minutesالطلبية المستخدمة: A (التي شيرت)الأداة: ورقة عمل التحليلات الرقمية والاختبار
للمصانع والمشترين وتجار التجزئة الذين يديرون منفذ بيع إلكترونيًا خاصًا بهم ويريدون اختبار تغيير واحد على صفحة منتج بطريقة تثبت فعليًا أن التغيير هو سبب النتيجة. الدرس 2.1 مفيد كخلفية لكنه غير مطلوب. الأرقام هي أرقام تعليمية مبنية على الطلبية A، التي شيرت.
المصنعDelta Garments، منفذ بيعها الإلكتروني الخاص
المنتجتي شيرت من طراز الطلبية A، درجة ثانية
المتغيّر 1 (الضبط)صورة المنتج الاستوديو الحالية
المتغيّر 2 (الاختبار)صورة منتج جديدة على عارض
تقسيم الزيارات50/50، الفترة نفسها لمدة أسبوعين
التغيير الوحيد المُختبَرالصورة فقط؛ السعر والوصف والتخطيط دون تغيير
02البداية

تُعلّم هذه الصفحة كيفية إعداد اختبار A/B لصفحة منتج بحيث يتغير متغير واحد فقط بين النسختين، ويمكن الوثوق بأي فرق في النتيجة كأثر لهذا المتغير نفسه

يمكن تغيير صفحة منتج بطرق كثيرة في آن واحد، صورة جديدة، وصف أقصر، لون زر مختلف، لكن تغيير عدة أشياء معًا ثم مقارنة النتيجة بالصفحة القديمة لا يترك طريقة لمعرفة أي تغيير سبّب فعليًا نتيجة أفضل أو أسوأ. لا يثبت الاختبار شيئًا إلا إذا بقي كل شيء ثابتًا باستثناء الشيء الواحد الذي يُختبَر.

يقدّم هذا الدرس الطريقة التي يستخدمها مصنع أو تاجر تجزئة لإعداد اختبار عادل لمتغير واحد قبل استخلاص أي استنتاج منه. ستطبّقها على منفذ البيع الإلكتروني الخاص بـDelta Garments، باختبار صورة منتج جديدة لتي شيرت من طراز الطلبية A درجة ثانية مقابل الصورة الحالية، لأن اختبارًا يتضمن أكثر من تغيير واحد ممزوج لا يمكنه أن يخبر أحدًا بصدق أي تغيير نجح.

03قبل أن تبدأ

ما تحتاجه، وما لا يغطيه هذا الدرس

تحتاج إلى: فكرة قراءة القراءة الأساسية الصحيحة لمعدل تحويل صفحة منتج، من الدرس 2.1، مفيدة كخلفية لكنها غير مطلوبة.

بنهاية هذا الدرس ستكون قادرًا على:

  • اختيار متغير واحد للاختبار وإبقاء كل عامل آخر دون تغيير؛
  • تقسيم الزيارات بعدل بين نسخة الضبط ومتغيّر الاختبار؛
  • تشغيل اختبار لفترة طويلة بما يكفي لجمع نتيجة موثوقة؛
  • إدراك عامل مربك من شأنه أن يفسد اختبارًا قبل أن يبدأ؛
  • تسجيل إعداد الاختبار بوضوح كافٍ ليمكن الوثوق بنتيجته لاحقًا.

لا يغطيه هذا الدرس: الحكم على ما إذا كانت نتيجة اختبار مكتمل حقيقية أم مجرد تشويش عادي (الدرس 2.3)، أو تشخيص صفحة تحصل بالفعل على زيارات كثيرة لكن تحويلها ضعيف (الدرس 2.4). يعلّم هذا الدرس فقط كيفية إعداد اختبار بشكل صحيح قبل تشغيله.

04مصطلحات أساسية

كلمات ستصادفها في هذا الدرس

المصطلحالمعنى
اختبار متغيّر واحداختبار يتغير فيه عنصر واحد بالضبط من الصفحة بين نسخة الضبط ومتغيّر الاختبار، بحيث يمكن عزو أي فرق في النتيجة إلى ذلك العنصر وحده.
متغيّر الاختبارإحدى النسختين المتنافستين أو أكثر من صفحة تُقارَن في اختبار.
شرط الضبطإبقاء كل عامل باستثناء المتغير الواحد الذي يُختبَر ثابتًا بين النسختين، حتى تعزل المقارنة ذلك المتغير الواحد.
عامل مربكأي تغيير آخر يحدث في وقت الاختبار نفسه يمكن أن يفسّر أيضًا تغيرًا في النتيجة.
تقسيم الزياراتطريقة توزيع الزوار الوافدين بين نسخة الضبط ومتغيّر الاختبار، عادة بأقرب ما يمكن إلى التساوي.
الصفحة المباشرةالنسخة من الصفحة التي تُعرَض فعليًا على الزائر أثناء الاختبار، سواء الضبط أو متغيّر الاختبار، حسب تقسيم الزيارات.
فترة الاختبارالطول الثابت للوقت الذي يستمر فيه الاختبار قبل قراءة نتيجته، متفق عليه مسبقًا وغير قابل للتمديد أو التقصير في منتصفه.
05الشرح
القاعدة

يغيّر اختبار المتغيّر الواحد عنصرًا واحدًا بالضبط من الصفحة بين نسخة الضبط ومتغيّر الاختبار، ويُبقي كل عامل آخر ثابتًا، بحيث يمكن عزو أي فرق في النتيجة إلى ذلك العنصر الواحد

تغيير الصورة والسعر في الوقت نفسه، ثم رؤية معدل تحويل أعلى في النسخة الجديدة، لا يترك طريقة لمعرفة ما إذا كانت الصورة، أم السعر، أم مزيج من الاثنين، هو ما أنتج النتيجة، لأن تفسيرين يتنافسان الآن على الرقم الواحد نفسه.

عدة تغييرات في آن واحدصورة جديدة، سعر جديد،وصف جديد معًالا يمكن معرفة أيها نجحاختبار متغيّر واحدصورة جديدة فقط؛ السعروالوصف والتخطيط ثابتةالنتيجة تخص الصورة وحدها
تغيير عنصر واحد وإبقاء كل عامل آخر ثابتًا هو ما يسمح بعزو نتيجة اختبار إلى ذلك العنصر وحده. تغيير عدة أشياء معًا يمزج آثارها في رقم واحد لا يستطيع أحد فصله لاحقًا.
ما تقابله في الواقع

ما يُعتبر "متغيّرًا واحدًا" وكيف تُقسَّم الزيارات يختلفان بحسب نموذج العمل والسوق وعدد الزوار المتاحين

ما يمكن أن يختلفالأشكال التي تصادفهالماذا يهمك ذلك
نموذج العملمنفذ بيع مصنّع حسب الطلب مثل منفذ Delta Garments الخاص يختبر طرازًا واحدًا في كل مرة، لأن مخزون أي طراز محدود ولا يتكرر إلى ما لا نهاية. أما تاجر تجزئة مصنّع حسب المخزون يدير طرازًا قائمًا فيمكنه تشغيل اختبار أطول، لأن الطراز نفسه يبقى متاحًا طوال الوقت.يجب أن تتناسب فترة الاختبار وتقسيم الزيارات مع المدة التي سيبقى فيها المنتج معروضًا للبيع فعليًا.
السوقينبغي لمتجر علامة تصدير إلكتروني يخدم أكثر من بلد في آن واحد تقسيم الزيارات داخل كل بلد على حدة إذا اختلف سلوك الشراء حسب البلد، بدلًا من دمج كل البلدان في نتيجة واحدة مجمّعة.يمكن أن يُخفي دمج أسواق مختلفة في اختبار واحد نتيجة صحيحة فقط في أحدها.
حجم الزياراتيمكن لصفحة ذات زيارات يومية كثيفة الوصول إلى تقسيم موثوق خلال أيام. أما صفحة منفذ منخفضة الزيارات، مثل منفذ Delta Garments الخاص بالدرجة الثانية، فتحتاج فترة اختبار أطول لجمع زيارات كافية في كل متغيّر لتكون ذات معنى.انخفاض الزيارات لا يجعل اختبار المتغيّر الواحد خاطئًا؛ بل يجعل فترة الاختبار اللازمة لنتيجة موثوقة أطول.
عدد المتغيرات المُختبَرةيقسم اختبار نسختين الزيارات إلى قسمين؛ اختبار ثلاثة أو أربعة خيارات صور في آن واحد يقسم الزيارات نفسها أكثر، فيجمع كل متغيّر زيارات أقل في الفترة نفسها.تحتاج المتغيرات الأكثر المُختبَرة في آن واحد إلى زيارات إجمالية أكبر نسبيًا، أو فترة أطول، للحفاظ على موثوقية كل مقارنة.
الحالة التي نتابعها

تختبر Delta Garments صورة منتج جديدة على عارض مقابل صورتها الاستوديو الحالية لتي شيرت الطلبية A نفسه، درجة ثانية

تدير Delta Garments منفذ بيع إلكتروني صغيرًا يبيع تي شيرتات من طراز الطلبية A درجة ثانية لا تفي بمعيار Northline Apparel التصديري لكنها لا تزال سليمة بما يكفي للبيع محليًا بسعر أقل. يريد فريق الرقمنة معرفة ما إذا كانت صورة منتج جديدة على عارض تحوّل بشكل أفضل من صورة الاستوديو البسيطة الحالية.

يبقى كل شيء آخر في الصفحة كما هو تمامًا بين النسختين: السعر نفسه، وصف المنتج نفسه، تخطيط الصفحة نفسه، والفترة نفسها لمدة أسبوعين، مع تقسيم الزوار الوافدين بنسبة 50/50 تقريبًا بين صورة الاستوديو الحالية (الضبط) والصورة الجديدة على عارض (متغيّر الاختبار).

الرقم المحسوب

يمنح تقسيم زيارات 50/50 على مدى فترة اختبار أسبوعين كل متغيّر عددًا مماثلًا من الزوار قبل مقارنة أي نتيجة

إجمالي الزيارات الأسبوعية لصفحة المنفذ: 2,000
تقسيم الزيارات: 50% ضبط، 50% متغيّر اختبار
مجموعة الضبط (صورة الاستوديو): 2,000 × 50% = 1,000 زائر أسبوعيًا
مجموعة متغيّر الاختبار (صورة العارض): 2,000 × 50% = 1,000 زائر أسبوعيًا
على مدى فترة الاختبار أسبوعين: 2,000 زائر لكل متغيّر إجمالًا

تقسيم متساوٍ، يُحافَظ عليه طوال الأسبوعين دون تعديل النسبة في منتصف الطريق، هو ما يسمح لاحقًا بمقارنة معدل تحويل كل متغيّر على قدم المساواة؛ تغيير التقسيم في منتصف الاختبار سيصبح هو نفسه عاملًا مربكًا.

الضبط (صورة الاستوديو): 1000 زائر/أسبوعمتغيّر الاختبار (صورة العارض): 1000 زائر/أسبوع
يُبقي التقسيم المتساوي مجموعة كل متغيّر بالحجم نفسه، فلا تُشوَّه مقارنة لاحقة لمجرد أن إحدى المجموعتين تضم زوارًا أكثر.
الطريقة

أعِدَّ اختبار متغيّر واحد عادلًا في خمس خطوات

  1. اختر عنصرًا واحدًا بالضبط من الصفحة لتغييره، كصورة المنتج وحدها.
  2. ثبّت كل عنصر آخر، السعر والوصف والتخطيط، بشكل متطابق بين نسخة الضبط ومتغيّر الاختبار.
  3. قسّم الزيارات الواردة بالتساوي قدر الإمكان بين النسختين، وحافظ على ذلك التقسيم ثابتًا طوال الاختبار.
  4. حدّد فترة اختبار مسبقًا، طويلة بما يكفي ليُنتج المرور الطبيعي للصفحة عدد زوار موثوقًا في كل متغيّر.
  5. راقب أي عامل مربك، كنقص مخزون أو حملة ترويجية غير مرتبطة، قد يصيب مجموعة متغيّر واحد دون الآخر أثناء الاختبار.
الفخ

الخطأ الشائع هو تغيير الصورة، ثم في منتصف الاختبار، تصحيح خطأ إملائي غير مرتبط في وصف المنتج على متغيّر واحد فقط

فريق يصحّح خطأ إملائيًا يلاحظه صدفة في صفحة متغيّر الاختبار، دون إجراء التصحيح نفسه في صفحة الضبط، يكون قد أدخل خفيةً متغيرًا ثانيًا فيما كان يُفترض أن يكون اختبار متغيّر واحد، حتى لو بدا التغيير صغيرًا وغير مرتبط تمامًا بالصورة التي تُختبَر فعليًا. تكلفة هذا الخطأ ليست التصحيح نفسه، الذي كان غير ضار بذاته؛ بل أن نتيجة الاختبار كاملة تصبح غير قابلة للاستخدام، إذ لا يستطيع أحد الآن القول بصدق ما إذا كانت الصورة، أم التصحيح، أم مزيج من الاثنين، هو ما أنتج النتيجة، فيضيع أسبوعا المرور الكاملين اللذين استهلكهما الاختبار ويُضطر إلى إعادة المقارنة بأكملها من الصفر.

06بكلمات بسيطة

إن أردت معرفة ما إذا كانت صورة جديدة تبيع أفضل من صورة قديمة، غيّر الصورة فقط واترك كل شيء آخر في الصفحة كما هو تمامًا. قسّم زوارك بالتساوي بين النسخة القديمة والجديدة، وحافظ على ذلك التقسيم ثابتًا لفترة محددة متفق عليها قبل بدء الاختبار. لا تصحح أو تحسّن أي شيء آخر في أي من النسختين أثناء تشغيل الاختبار، حتى لو كان صغيرًا وغير مرتبط، لأن أي تغيير ثانٍ يفسد قدرتك على القول إن الصورة وحدها سبّبت النتيجة.

07مراجعة سريعة
  • غيّر عنصرًا واحدًا بالضبط بين نسخة الضبط ومتغيّر الاختبار؛ لا تغيّر أبدًا شيئين في آن واحد.
  • قسّم الزيارات بأقرب ما يمكن إلى 50/50 حسب ما تسمح به المنصة، وحافظ على هذا التقسيم طوال فترة الاختبار.
  • اتفق على فترة الاختبار مسبقًا، عادة أسبوع إلى أربعة أسابيع حسب حجم زيارات الصفحة نفسها.
  • راقب أي تغيير غير مرتبط، كمشكلة مخزون أو حملة ترويجية، يصيب متغيّرًا واحدًا فقط أثناء الاختبار.
  • سجّل الإعداد الدقيق، ما تغيّر وما بقي ثابتًا، قبل بدء الاختبار، لا بعد قراءة النتيجة.
08موقف عمل

يلاحظ فريق Delta Garments أن صورة متغيّر الاختبار تُحمَّل أيضًا أسرع من صورة الضبط، على اتصال جوال بطيء

في منتصف اختبار الأسبوعين لصورة العارض الجديدة مقابل صورة الاستوديو الحالية، يلاحظ أحد أعضاء الفريق أن ملف الصورة الجديدة أصغر حجمًا ويُحمَّل بشكل أسرع بشكل ملحوظ على اتصال جوال بطيء، لمجرد طريقة تصديره، لا لأن أحدًا قصد تغيير السرعة.

  • ملف صورة الاستوديو (الضبط) 480 كيلوبايت؛ ملف صورة العارض (متغيّر الاختبار) 140 كيلوبايت.
  • يتصفح نحو ثلث زوار منفذ البيع عبر اتصال جوال بطيء حيث تؤثر سرعة التحميل بوضوح فيما إذا كانت الصفحة تنتهي من التحميل قبل مغادرة الزائر.
  • تبقّى أسبوع واحد من الاختبار.

هل يجب أن تعامل Delta Garments النتيجة النهائية للاختبار كدليل على أن صورة العارض نفسها تحوّل بشكل أفضل؟ قرّر قبل فتح الإجابة.

اعرض القرار

لا. الفرق غير المقصود في حجم الملف وسرعة التحميل عامل مربك؛ لم يعد بإمكان الاختبار عزل الأثر البصري للصورة عن سرعة تحميلها الأسرع.

1. يتطلب اختبار المتغيّر الواحد إبقاء كل عامل آخر متساويًا، وسرعة التحميل، خاصة على اتصالات جوال بطيئة، عامل يمكن أن يغيّر التحويل بمعزل عما تُظهره الصورة. 2. يستخدم ثلث الزوار اتصالات يكون فيها هذا الفرق كبيرًا بما يكفي ليهم، فليس خطأ تقريب تافه يُتجاهل. 3. الاستجابة الصادقة هي رصد العامل المربك، وإعادة تصدير الصورتين بحجم ملف متطابق، وإعادة تشغيل الاختبار، بدلًا من الإبلاغ عن نتيجة تمزج سببين وكأنها أثبتت واحدًا.

09كم يكلف

يمكن أن يؤدي تشغيل اختبار مربك والثقة بنتيجته إلى إبقاء منفذ بيع على خيار خاسر لأسباب لم تُختبَر فعليًا قط

يحمل تي شيرت الطلبية A سعر محل قدره 19.90 دولارًا للقطعة، رغم أن منفذ Delta Garments الخاص بالدرجة الثانية يبيع الطراز نفسه مخفَّضًا إلى نحو 60% من ذلك السعر، 11.94 دولارًا للقطعة (docs/02 القسم 7 يثبّت الرقم الأصلي كامل السعر). لو نسب اختبار مربك خطأً نتيجة إلى صورة العارض كانت في الواقع بسبب سرعة التحميل الأسرع، وعمّمت Delta Garments الصورة دون إصلاح فجوة السرعة الأساسية في صفحات أخرى:

19.90 × 60% = 11.94 دولارًا سعر المنفذ للقطعة
لو حوّلت 500 زيارة أسبوعية بنسبة أسوأ بمقدار نقطة مئوية واحدة مما اقترحه الاختبار المربك: 500 × 1% = 5 مبيعات أقل أسبوعيًا
5 × 11.94 دولارًا = 59.70 دولارًا أسبوعيًا مبخوسة في كل توقع

يتراكم رقم أسبوعي صغير بصمت عبر كل أسبوع يستمر فيه تطبيق درس خاطئ، وهي تكلفة حقيقية أكبر بكثير من الأسبوع الإضافي الذي كانت ستستغرقه إعادة اختبار نظيفة.

10نموذج عمل

ورقة عمل التحليلات الرقمية والاختبار: سجّل إعداد كل اختبار

استخدم ورقة عمل T23-C02 للتحليلات الرقمية والاختبار، صفحة "سجل إعداد الاختبار". لكل اختبار، سجّل المتغير الواحد الذي تغيّر، وما بقي ثابتًا، وتقسيم الزيارات، وفترة الاختبار، وأي عامل مربك لوحظ أثناء تشغيل الاختبار. ابدأ بمثال Delta Garments أعلاه، ثم أضف اختبارك الخاص.

[تنزيل ورقة عمل التحليلات الرقمية والاختبار](../../templates/T23-C02-digital-analytics-and-testing-worksheet.xlsx)

حمّل ورقة عمل التحليلات الرقمية والاختبار (إكسل)

11اختبر نفسك

1. لماذا يجعل تغيير الصورة والسعر في الوقت نفسه نتيجة اختبار ما يستحيل تفسيرها بوضوح؟

2. صورة متغيّر اختبار Delta Garments تُحمَّل أسرع من صورة الضبط على اتصالات بطيئة، لأسباب غير مرتبطة بالاختبار. ماذا يجب أن يفعل الفريق؟

3. لماذا يجب تثبيت تقسيم زيارات الاختبار وفترته مسبقًا، بدلًا من تعديلهما بمجرد بدء ظهور نتائج مبكرة؟

12قاموس
ARENFRTRالمعنى
اختبار متغيّر واحدOne-variable testTest à une seule variableTek değişkenli testاختبار يتغير فيه عنصر واحد بالضبط من الصفحة بين نسخة الضبط ومتغيّر الاختبار، بحيث يمكن عزو أي فرق في النتيجة إلى ذلك العنصر وحده.
متغيّر الاختبارTest variantVariante testéeTest varyantıإحدى النسختين المتنافستين أو أكثر من صفحة تُقارَن في اختبار.
شرط الضبطControl conditionCondition de contrôleKontrol koşuluإبقاء كل عامل باستثناء المتغير الواحد الذي يُختبَر ثابتًا بين النسختين، حتى تعزل المقارنة ذلك المتغير الواحد.
عامل مربكConfounding factorFacteur confondantKarıştırıcı etkenأي تغيير آخر يحدث في وقت الاختبار نفسه يمكن أن يفسّر أيضًا تغيرًا في النتيجة.
تقسيم الزياراتTraffic splitRépartition du traficTrafik bölünmesiطريقة توزيع الزوار الوافدين بين نسخة الضبط ومتغيّر الاختبار، عادة بأقرب ما يمكن إلى التساوي.
الصفحة المباشرةLive pagePage en directCanlı sayfaالنسخة من الصفحة التي تُعرَض فعليًا على الزائر أثناء الاختبار، سواء الضبط أو متغيّر الاختبار، حسب تقسيم الزيارات.
فترة الاختبارTest periodPériode de testTest dönemiالطول الثابت للوقت الذي يستمر فيه الاختبار قبل قراءة نتيجته، متفق عليه مسبقًا وغير قابل للتمديد أو التقصير في منتصفه.
13التالي

الدرس 2.3: حساب ما إذا كانت نتيجة اختبار حقيقية أم مجرد تشويش

ستأخذ في الدرس التالي نتيجتي اختبار مكتمل وتقرر ما إذا كان الفارق بينهما كبيرًا بما يكفي للثقة به، أم صغيرًا بما يكفي ليكون مجرد تشويش. العودة إلى خريطة الدورة

14مستويات الإتقان

تعرّفميّز اختبار المتغيّر الواحد الحقيقي عن اختبار غيّر أكثر من شيء واحد خفيةً.
اربطارصد كيف يعمل تقسيم الزيارات وفترة الاختبار معًا لمنح كل متغيّر نتيجة موثوقة.
قارناحكم على ما إذا كان فرق غير متوقع لوحظ في منتصف الاختبار يُعدّ عاملًا مربكًا.
قرراختر ما إذا كان إعداد اختبار نظيفًا بما يكفي للوثوق بنتيجته، أم يحتاج إعادة تشغيل أولًا.