التكليف والتشخيص · الدرس 3

تثليث خط الأساس

6 دقائق قراءة

أهداف الدرس

  • عرّف مجموعات وفترات مقارنة وبدائل سببية؛ حالة هبوط عضوي بعد تغيير التتبع.
أدوات القراءة

خط الأساس وصف منضبط لما كان يحدث قبل التدخل. لا تكفي جملة «الزيارات العضوية هبطت 20%» ما لم نعرف الفترة، وتعريف الزيارة، ونطاق الصفحات، وأثر الموسم، وهل تغيرت أداة القياس. في شركة افتراضية لإصلاح الأجهزة، يظهر انخفاض في زيارات البحث بعد إطلاق موقع جديد. يصف مدير التسويق ذلك بأنه عقوبة من محرك البحث، ويقول المطور إن وسم التحليلات تغير فقط. المطلوب فصل ثلاث سلاسل: ظهور الموقع ونقراته في نتائج البحث، جلسات الموقع الموسومة بالبحث، وطلبات الحجز المؤكدة. تختلف مقاماتها، وقد تختلف اتجاهاتها، فلا نجمعها في رسم واحد لنستنتج سببًا.

كوّن خط الأساس من وحدات متجانسة. اختر الأسابيع نفسها أو فترات متقاربة في نمط الطلب، وافصل بين صفحات الخدمة وصفحات المقالات، والهاتف والحاسوب، والأسواق، والعلامة التجارية والبحث العام إن كانت البيانات تسمح. افحص تغير التوافر أو السعر أو ساعات العمل. عند مقارنة أسبوع إطلاق بموسم عطلة قد تنسب للموقع أثرًا سببه الطلب الموسمي. وعند ضم صفحة مقالة كثيرة الزيارات إلى صفحة حجز قليلة الزيارات، قد يرتفع متوسط الزيارات مع هبوط الطلبات ذات القيمة. اكتب لكل شريحة البسط والمقام والنافذة الزمنية، ثم أظهر الإجمالي بوصفه تلخيصًا لا بديلًا عن التحليل.

افصل بين أثر القياس وأثر السلوك. إذا انتقل الموقع إلى أداة تحليلات جديدة في اليوم الذي «انهارت» فيه الجلسات، قارن مع سجلات الخادم، وبيانات ظهور البحث، وعدد الطلبات المكتملة. بقاء الظهور والنقرات والطلبات قريبًا من السابق مع هبوط الجلسات يوحي بخلل تتبع، لكنه لا يثبته وحده؛ قد يختلف تعريف الجلسة أو موافقة المستخدم. افتح سجل التغييرات، اختبر الصفحة الحية بإذن الفريق، وتحقق هل يرسل الحدث مرة، وهل يُحجب في صفحات بعينها. إن هبطت النقرات أيضًا، افتح تقرير الصفحات والاستعلامات ومراقبة الفهرسة قبل إعلان أن الأداة بريئة.

استخدم جدول فرضيات بديلة. فرضية القياس تتوقع فجوة أكبر بين نقرات البحث والجلسات، مع حجوزات أكثر ثباتًا. فرضية تراجع ملاءمة النتيجة تتوقع ظهورًا مستمرًا لكن معدل نقر أقل في استعلامات محددة. فرضية تدهور تجربة الموقع تتوقع أن يصل الزائر ثم يترك قبل الحجز، مع أثر أقوى في جهاز أو صفحة. فرضية موسمية تتوقع تغيرًا مشابهًا في شرائح لا تتعرض للإطلاق أو في سنة مقارنة مناسبة. لكل فرضية اكتب «مشاهدة تؤيد، مشاهدة تعارض، فحص تالٍ، قرار يتغير». هذا يحول الخلاف بين الفرق من تصويت على رواية إلى خطة اختبار.

احذر مفارقة التجميع. قد يرتفع معدل الحجز في كل من الهاتف والحاسوب بينما يهبط الإجمالي إذا زادت حصة الهاتف ذي المعدل الأدنى. اعرض أحجام الشرائح إلى جانب معدلاتها. واحذر أيضًا انتقاء تاريخ بداية يعطي أكبر هبوط؛ ثبت النافذة قبل تفسير النتيجة، ثم اختبر نافذة حساسية ثانية معلنة. إذا كانت أعداد الحجوزات قليلة، تتسع مساحة التقلب العشوائي؛ لا تحول اختلاف ثلاث طلبات إلى قرار كبير. إذا احتاج القرار إلى إثبات سببي، اقترح تجربة أو مجموعة مقارنة مناسبة بدل تحميل الرسم الزمني أكثر مما يحتمل.

يمكن توضيح مفارقة التجميع بأرقام صغيرة افتراضية: قبل الإطلاق حجز 40 من 400 زائر حاسوب و10 من 200 زائر هاتف، فكان الإجمالي 50 من 600، أي 8.3% تقريبًا. بعد الإطلاق حجز 22 من 200 زائر حاسوب و36 من 600 زائر هاتف. تحسن معدل الحاسوب من 10% إلى 11% والهاتف من 5% إلى 6%، لكن الإجمالي صار 58 من 800، أي 7.25%. السبب تغير مزيج الأجهزة لا تدهور التحويل داخل كل جهاز. لا تقدم هذه الأرقام بوصفها بيانات الشركة، بل برهانًا حسابيًا على ضرورة تفكيك المعدل. افحص كذلك إن كانت زيارات الهاتف الجديدة أقل نية للشراء؛ عندئذ يصبح قرار الاستهداف مختلفًا عن قرار تجربة الدفع.

التوصية في حالة الإصلاح هي ترتيب العمل بحسب تكلفة الخطأ. أولًا تدقيق وسم الجلسات وربطه بإذن التتبع، وثانيًا تحليل الاستعلامات والصفحات التي تراجع معدل نقرها، وثالثًا اختبار تجربة الحجز على الهاتف. لا نعيد بناء الموقع كله أو نضاعف الإعلانات قبل هذه الفحوص. سجّل مالك كل فحص وتاريخ اكتماله ومعيار القرار: إذا كان هبوط الجلسات قياسيًا فقط، أصلح التقرير؛ إذا تراجعت النقرات المؤهلة والحجوزات في صفحات خدمة محددة، اختبر تحسين المقتطف والصفحة؛ وإذا لم يتضح السبب، أبق التوصية مؤقتة وحدد ما يلزم لجمع دليل أفضل.

خلاصة الدرس

خط الأساس وصف منضبط لما كان يحدث قبل التدخل. لا تكفي جملة «الزيارات العضوية هبطت 20%» ما لم نعرف الفترة، وتعريف الزيارة، ونطاق الصفحات، وأثر الموسم، و