جودة البيانات وسلسلة نسبها بين الأدوار
7 دقائق قراءة
أهداف الدرس
- تتبّع سجلًا من المصدر إلى التقرير وحدد فحوص الجودة ومسؤولية كل دور
لاستخدام كل الأدوات يرجى تسجيل الدخول
بعد تسجيل الدخول تتاح لك أدوات القراءة: تكبير الخط وتصغيره، ونوع الخط، والمسافة بين الأسطر، ووضع التركيز، وتظليل النص وتغميقه، وملاحظات تُحفظ في حسابك وتجدها في «دراستي».
عبارة «البيانات صحيحة» لا تذكر بالنسبة إلى أي سؤال أو مرحلة. قد تكون قيمة 12 سليمة في سجل عمليات الدفع لكنها تظهر مرتين في تقرير المبيعات لأن خط التحليل أعاد تحميل الدفعة. وقد يكون التاريخ صالحًا نحويًا ولكنه تاريخ وصول الملف لا تاريخ وقوع البيع. ابدأ بتعريف حبيبة الحدث: هل السجل يمثل عملية دفع، عنصر فاتورة، تعديلًا، أم لقطة يومية؟ بعد ذلك حدد المقياس والبسط والمقام ونافذة الزمن. لا تختبر الجودة بعد اكتمال لوحة المعلومات فقط؛ افحصها عند الالتقاط، والتحويل، والتجميع. وفي كل خطوة احتفظ بمعرف يمكن به الرجوع إلى المصدر أو إلى نسخة معالجة محددة. هذا هو الحد الأدنى لتفسير اختلاف رقمين يبدوان متناقضين.
التفرد والاكتمال والاتساق والدقة الزمنية أسئلة مختلفة. اختبار التفرد على payment_id قد يكشف إرسال الدفع نفسه مرتين، لكنه لا يكشف فاتورتين صحيحتين لنفس العميل. اختبار اكتمال customer_id يفيد إذا كان التقرير يربط الدفع بالعميل؛ وقد لا يلزم لسؤال آخر. اتساق العملة يسبق جمع المبالغ، واتساق المنطقة الزمنية يسبق مقارنة تقارير الفروع اليومية. الدقة لا تُستنتج من انعدام القيم الفارغة: قد يكون رمز الفرع موجودًا لكنه يشير إلى فرع خاطئ. لذلك اربط كل فحص بقرار يتأثر بفشله وحدد عتبة وسلوكًا عند تجاوزها. لا تسوِّ القيم المرفوضة بصفر إن كان الصفر مبلغًا حقيقيًا؛ اعزلها وافصح عن أثرها.
سلسلة النسب سجل للكيفية التي وصل بها الرقم إلى الشاشة. سجّل ملف أو جدول المصدر، وقت استخراج الدفعة، نسخة قاعدة التحويل، عدد السجلات الداخلة والمرفوضة، ومفتاح إزالة التكرار. عند تعديل قاعدة تحويل `currency` أو إعادة تحميل أسبوع قديم، يجب معرفة أي تقرير تأثر وأي نسخة من المخرجات استُخدمت. تكتفي سلسلة النسب بمراجع تتيح العودة إلى البيانات؛ معرفات التشغيل والسجلات الوصفية تكفي لتتبع المراحل. إذا تعذر ربط صف التقرير بمصدره، فلا يمكن تمييز خطأ الإدخال من خطأ التحويل أو من تجميع صحيح بحبيبة مختلفة. تخدم هذه الرؤية الثقة في التحليل وتساعد في إعادة الإنتاج، لكن صلاحية الوصول إلى البيانات تفحص منفصل.
تتقاسم الأدوار العمل دون أن يختفي حد المسؤولية. مسؤول قاعدة البيانات يحافظ على التشغيل، والصلاحيات، والنسخ الاحتياطية وأداء مخزن البيانات الذي يديره. مهندس البيانات ينسق جلب السجلات وتحويلها ونقلها ويضع اختبارات الخط ومراقبة فشل الدفعات. محلل البيانات يعرّف المقياس، ويتحقق من معنى الأبعاد، ويعرض الاستنتاج وحدوده. قد تجمع مؤسسة صغيرة الأدوار في شخص واحد، لكن القرارات الثلاثة تبقى متميزة. إذا وجد المحلل رقمًا غير متوقع، فلا «يصلحه» بإخفاء الفرع من الرسم؛ يراجع تعريف المقياس والنسب مع المهندس، ثم يُصعّد مشكلة أصلية في قاعدة التشغيل إلى مالكها. لا تنقل المسؤولية لمجرد أن الخدمة السحابية مُدارة.
احسب الجودة عند حبيبة مناسبة. إذا وصل 1,000 سجل دفع وفيها 20 سجلًا مكررًا و10 سجلات بلا عملة، فلا يصح أن تقول تلقائيًا إن 970 صالحة؛ قد تتداخل المجموعتان. احسب اتحاد مجموعات الرفض بعد تحديد أولوية القواعد، وبيّن إن كانت السجلات المكررة نسخًا مكررة حقًا أم معاملات مختلفة تحمل معرفًا معيبًا. راقب اتجاه المعدل بين الدفعات بدل إعلان نجاح دفعة واحدة معيارًا عامًا. وإذا تغيّر تعريف «عملية ناجحة» من كل حالة مدفوعة إلى المدفوعة وغير المستردة، أصدِر نسخة جديدة من المقياس وسجل تاريخ التبديل. المقارنة بين نسختين بلا هذا البيان توهم بنمو أو هبوط لم يحدث في الواقع. وللتأكد من الاختيار، اختبر التقرير بمثال صغير تستطيع حسابه يدويًا ثم قارنه بالمخرج الآلي. إذا لم يتطابقا، حدّد أول مرحلة يختلف عندها العدد أو المبلغ قبل تغيير الرسم أو الاستعلام النهائي. احتفظ بصفوف الاختبار الاصطناعية منفصلة عن بيانات الإنتاج، ولا تجعلها تدخل المقياس الفعلي. أعد الفحص بعد أي تغيير في قاعدة الدمج أو تعريف الاسترداد، لأن نجاح نسخة سابقة لا يثبت صحة النسخة الجديدة.
يعترض مدير على رقم تغير بعد تصحيح بيانات الأمس. افتح سلسلة النسب من التقرير إلى التحويل ثم المصدر. يحتاج كل تصحيح وصفًا للخطأ ووقت ظهوره ومجموعة السجلات المتأثرة. حدد هل المشكلة في البيانات الخام أم في قاعدة اشتقاق القيمة. إذا كان المصدر صحيحًا والتحويل خاطئًا، احتفظ بالمصدر وأعد معالجة النسخة المناسبة. وإذا صحح المصدر نفسه، سجل نسخته الجديدة وسبب استخدامها. أعط التقرير رقم إصدار واضحًا يربطه بمدخلاته. قد يتساوى المجموع قبل التصحيح وبعده بينما تتغير القيم بين الفروع، لذلك قارن توزيعًا مناسبًا إلى جانب الإجمالي. يوضح هذا الفحص الفرق بين إصلاح البيانات وتغيير تعريف المؤشر، ويساعد صاحب التقرير على تفسير الأثر للمستخدمين.
خلاصة الدرس
تتبّع سجلًا من المصدر إلى التقرير وحدد فحوص الجودة ومسؤولية كل دور