ما هو اختبار A/B، وهل يحتاجه نشاطي الصغير؟

ما هو فعلًا

لديك نسختان من صفحة — واحدة يظهر فيها السعر وأخرى لا. ويُقسَم الزوّار عشوائيًا بينهما، وتقيس أيّهما تنتج استفسارات أكثر.

وتلك العشوائية هي المقصود كلّه. فبدونها تقارن هذا الشهر بالسابق، وقد يكون أي فرق موسمًا أو عطلة أو حملة منافس أو الطقس. وقسمة الزيارات نفسها في اللحظة نفسها تزيل كل ذلك.

ومُجرًى كما ينبغي، هو السبيل الوحيد لتعرف أن تغييرًا نفع لا أن تعتقد ذلك.

لماذا لا ينبغي لمعظم الأنشطة الصغيرة العناء بعد

وإليك الحساب الذي لا يضعه أحد في العرض الترويجي.

لرصد فرق ذي معنى بين نسختين تحتاج إلى تحويلات كافية في كل مجموعة بحيث لا تكون الفجوة صدفة معقولة. وكدليل تقريبي، يعني ذلك مئات التحويلات لكل نسخة، وهو لموقع يحوّل ببضعة بالمئة يعني آلاف الزوّار لكل نسخة، خلال مدة قصيرة بما يكفي لئلّا يتغيّر شيء آخر.

والنشاط المحلّي الذي ينال ستمئة زائر شهريًا واثني عشر استفسارًا سيحتاج إلى سنوات لإجراء اختبار نظيف واحد. والاختبار الذي يُجرى سنوات ليس اختبارًا، لأن النشاط والسوق والزيارات كلها تحرّكت.

ونمط الفشل أسوأ من جهد مهدور. تُجري اختبارًا ثلاثة أسابيع، فتنال النسخة B تسعة استفسارات مقابل ستة لـ A، فتستنتج أن B أفضل بخمسين بالمئة. وليست كذلك. فتلك الفجوة داخل ما تنتجه الصدفة عند تلك الأعداد، وتكون قد اتّخذت قرارًا دائمًا على رمية عملة — بثقة أعلى ممّا كانت قبل أن تبدأ، وذلك هو الجزء المكلف.

ماذا تفعل بدلًا من ذلك

عند مستويات زيارات الأنشطة الصغيرة، المكاسب ليست هامشية بل بنيوية، ولا تحتاج إلى اختبار لتعرف أنها تنفع.

اختبر أن استمارة التواصل تعمل. لا اختبار A/B بل اختبارًا فعليًا. فالاستمارة المعطّلة معدّلُ تحويل صفر — انظر استمارة التواصل توقّفت عن العمل.

ضع سعرًا على الموقع. أكبر تغيير تستطيعه معظم مواقع الأنشطة الصغيرة، ولا تحتاج إلى دلالة إحصائية لتعرف أن من لا يستطيع معرفة هل يتحمّل كلفتك سيغادر.

اجعله يُحمَّل في أقلّ من ثلاث ثوانٍ على هاتف ببيانات الجوال.

اطلب شيئًا واحدًا لكل صفحة، مصوغًا بما يناله الزائر.

أجب عن السؤال الذي وصل به الناس فعلًا، ويعني ذلك عادةً صفحة لكل خدمة لا صفحة مجمّعة.

وكلٌّ من هذه تحسّن معروف لا فرضية. افعل الخمسة قبل أن تفكّر في اختبار أي شيء، فالاختبار لا يجد إلا فروقًا صغيرة وما زالت لديك فروق كبيرة متاحة.

نسخة الاختبار التي تنجح على نطاق صغير

ليست A/B بل مقارنة تتابعية بتحفّظ صادق.

غيّر شيئًا واحدًا. ودوّن التاريخ. وقارن الأشهر الثلاثة التالية بالثلاثة السابقة، من مصدر الزيارات نفسه، وكن صريحًا مع نفسك بأن الموسمية عامل مربك. وهي طريقة أضعف ولا تثبت شيئًا. لكنها نافعة اتجاهيًا، ولا تكلّف شيئًا، وهي ما يستطيع نشاط صغير إجراءه فعلًا.

والانضباط الذي يجعلها تنجح هو تغيير شيء واحد في المرة وتدوين ما غيّرته ومتى. فمعظم الأنشطة لا تستطيع قول ما غيّرته قبل ستة أشهر، ما يجعل أي مقارنة بلا معنى أيًّا كانت الطريقة.

متى يصير يستحق العناء فعلًا

• حين تنال بضعة آلاف زائر ذي صلة شهريًا، باطّراد
• وحين تكون الصفحة التي تريد اختبارها على مسار نتيجة تستطيع عدّها
• وحين تكون قد أنجزت الإصلاحات البنيوية أعلاه
• وحين يساوي فرق بنسبة صغيرة مالًا حقيقيًا لك

وحتى ذلك الحين، الجواب الصريح أنك ستشتري أداة تنتج أرقامًا لا تحتملها زياراتك — وذلك أسوأ من لا أرقام، لأن الأجوبة الخاطئة الواثقة يُتصرَّف بموجبها.

كيف يبدو هذا في Helm

الشرط المسبق لأي نسخة من هذا — الاختبار الحقيقي أو المقارنة التتابعية أعلاه — هو أن تستطيع تغيير صفحة ورؤية ما حدث.

التغيير حقل وزرّ نشر: السعر وصياغة الزرّ والعنوان ونصّ الصفحة. وهذا يهمّ لأن الطريقة تعتمد على التكرار، والتكرار يموت إن كان كل تغيير تذكرة دعم.

ورؤية ما حدث في لوحة التحكم نفسها: صفحات الدخول والمصادر وإرسالات الاستمارات، ونطاقات تواريخ مع طبقة مقارنة فيصير هذا الربع مقابل السابق نقرتين لا جدول بيانات.

وملاحظة صريحة: Helm لا يجري اختبارات تقسيم. فلا محرّك لتقسيم الزيارات، وللمواقع التي يخدمها ذلك هو القرار الصحيح — إذ ستنتج الأداة أرقامًا لا تحتملها الزيارات. وإن نموت إلى حدّ يصير فيه اختبار A/B الحقيقي مجديًا، فستريد أداة مخصّصة له، وسنقول لك ذلك.

باختصار

اختبار A/B تقنية حقيقية تحتاج إلى زيارات حقيقية. وتحت بضعة آلاف زائر شهريًا ستقيس الحظّ وتتصرّف بموجبه بثقة، وذلك أسوأ من ألّا تقيس. أنجز الإصلاحات البنيوية الخمسة أولًا — فهي أكبر ومجانية ومؤكّدة. ثم غيّر شيئًا واحدًا في المرة، ودوّن متى، وقارن ربعًا بربع حتى تكبر بما يكفي للطريقة الحقيقية.