اختبارات A/B
قارن بين إعدادين للبحث على متسوقين حقيقيين، واعرف متى تكون النتيجة موثوقة.
يعرض اختبار A/B إعدادين للبحث (أو حتى أربعة) على متسوقين مختلفين في الوقت نفسه، ويخبرك أيهما يعمل أفضل بمقياس حقيقي، مثل نسبة النقر أو نسبة التحويل. واختبارات A/B متاحة في باقتي Pro وEnterprise.
ما الذي يمكنك اختباره
| النوع | مثال |
|---|---|
| الترتيب | رفع المنتجات المتوفرة أو المنتجات الجديدة أكثر أو أقل |
| المرادفات | قائمة مرادفاتك مقابل القائمة نفسها مع مرادفات جديدة |
| القواعد | البحث مع مجموعة من المنتجات المثبّتة أو المرفوعة أو دونها |
| إعادة الصياغة بالذكاء الاصطناعي | إعادة الصياغة للطلبات الطويلة مقابل عدمها |
لا يغيّر كل نوع من الاختبارات إلا إعداداته هو، فاختبار الترتيب لا يغيّر مرادفاتك أبدًا.
المقاييس
اختر مقياسًا رئيسيًا واحدًا: نسبة النقر أو نسبة التحويل أو نسبة الإضافة إلى السلة أو نسبة البحث دون نتائج (والأقل فيها أفضل). وتُعرض المقاييس الأخرى أيضًا.
تشغيل اختبار
- افتح اختبارات A/B في لوحة التحكم واضغط اختبار جديد.
- اختر النوع، والمقياس الرئيسي، ونسبة الزيارات الداخلة في الاختبار (من 1% إلى 100%)، واضبط كل نسخة. النسخة الأولى هي نسخة المقارنة (ما لديك اليوم).
- قبل البدء، يبيّن SeekGist عدد جلسات المتسوقين التي تحتاجها كل نسخة، وكم يومًا يستغرق ذلك تقريبًا بحسب زيارات متجرك.
- اضغط بدء. لا يمكن تغيير النسخ بعد ذلك.
- اقرأ النتيجة في الصفحة نفسها. واضغط إيقاف عندما تقول الصفحة إن هناك فائزًا، أو عندما يبلغ الاختبار حجمه المخطط له.
لا يعمل إلا اختبار واحد في الوقت نفسه لكل متجر.
من يرى ماذا
توضع كل جلسة متسوق في نسخة واحدة بحسب قيمة تجزئة لمعرّف الجلسة والاختبار. ويبقى المتسوق في النسخة نفسها طوال الاختبار، ولا تنقل نسبة الزيارات أي جلسة من نسخة إلى أخرى. ولا تُستخدم أي بيانات شخصية للمتسوقين: تُحفظ معرّفات الجلسات قيمَ تجزئة.
متى تكون النتيجة حقيقية؟
يمكنك فتح صفحة النتائج في أي وقت، فكثرة النظر لا تصنع فائزين زائفين. ولا يعلن SeekGist فائزًا إلا إذا تحققت كل هذه الشروط:
- أن يجتاز الفرق اختبارًا يبقى صحيحًا مهما كثر النظر إليه (اختبار تتابعي «صالح دائمًا»، mSPRT)، عند مستوى 5%؛
- أن يكون لكل نسخة 100 جلسة على الأقل؛
- أن يكون الاختبار قد عمل 7 أيام على الأقل (أسبوع كامل من المتسوقين، ليُحسب وسط الأسبوع ونهايته معًا)؛
- أن يبدو توزيع الزيارات سليمًا. فإذا ابتعد عدد الجلسات في كل نسخة كثيرًا عن النسب التي ضبطتها، فهناك خلل في الإعداد، فيخفي SeekGist الفائز ويطلب منك مراجعة التوزيع.
ومع 3 نسخ أو 4، يُصحَّح الاختبار لكثرة المقارنات (طريقة Holm). وتعرض الصفحة أيضًا قيمة p التقليدية، مع تنبيه بأنها ليست لاتخاذ القرار أثناء عمل الاختبار.
ماذا تعني رسائل الصفحة
| الرسالة | المعنى |
|---|---|
| نجمع البيانات الآن | ما زال الوقت مبكرًا للحكم. |
| لا يوجد فرق واضح بعد | أبقِ الاختبار يعمل. |
| إحدى النسختين متقدمة، لكن انتظر أسبوعًا كاملًا | يبدو الفرق حقيقيًا، لكن لم تمضِ 7 أيام. |
| الفرق حقيقي | لديك فائز. طبّقه، ثم أوقف الاختبار. |
| لم يظهر فرق واضح | بلغ الاختبار حجمه المخطط له، والنسخ متقاربة. |
| أُوقف الاختبار مبكرًا | أُوقف قبل 7 أيام أو قبل حجمه المخطط له. |
| راجع توزيع الزيارات | عدد الجلسات في كل نسخة لا يطابق النسب التي ضبطتها. |
الإشعار
يُرسل experiment.finished عندما يتوقف اختبار، ومعه نتيجته.