تحوّل ذكاء الأعمال المؤسسي
إعادة بناء أساس التحليلات لمجموعة تجزئة: من ستة جداول تقارير متضاربة واستعلامات تستغرق ٤٥ دقيقة، إلى مستودع بيانات من ٣٢ نموذجًا يجيب في ثوانٍ.
السياق
مجموعة درعة للتجزئة
٢٠٢٤ — مستمر
الدور
مهندس منصة البيانات · رئيس التحليلات
التقنيات
- ClickHouse
- dbt
- Apache Airflow
- Airbyte
- SQL Server
- Power BI
×259
أسرع في استعلامات لوحات المعلومات
$80K
وفورات سنوية من الأتمتة
32
نموذج dbt في الإنتاج
المشكلة
كانت التقارير تعمل مباشرة على قاعدة SQL Server التشغيلية. مهام التجميع الليلية كانت تستغرق أكثر من ٤٥ دقيقة وتفشل بانتظام؛ وستة جداول تقارير مركزية انحرفت عن بعضها حتى صارت المالية والعمليات والتسويق تعرض أرقامًا مختلفة للأسبوع نفسه. توقّف التنفيذيون عن الثقة بلوحات المعلومات — وهي اللحظة التي يموت فيها أي نظام ذكاء أعمال فعليًا، مهما كانت تكلفته.
المعمارية
اعتمدت إعادة البناء فصلًا صارمًا بين الأحمال التشغيلية والتحليلية:
- الاستيعاب — يقوم Airbyte بنقل قواعد بيانات ERP وواجهات API وملفات CSV القديمة إلى طبقة خام، بشكل تزايدي وقابل للإعادة دون تكرار.
- المستودع — أصبح ClickHouse المحرك التحليلي. التخزين العمودي والتنفيذ المتجهي خفّضا تجميعات الـ ٤٥ دقيقة الليلية إلى أقل من ١٠ ثوانٍ — رقم الـ ×259 الذي غيّر داخليًا معنى «انتظار التقرير».
- التحويل — فُكِّكت الجداول الستة وأُعيد بناؤها في ٣٢ نموذج dbt مُختبَرًا ضمن طبقات Medallion (خام → تهيئة → عرض)، مع نسبٍ موثّق من عمود المصدر حتى رقم اللوحة.
- التنسيق — يدير Airflow المخطط كاملًا بإعادة المحاولة واتفاقيات مستوى الخدمة والتنبيهات. تحوّل فشل خطوط البيانات من أزمة أسبوعية إلى استثناء نادر.
- العرض — نماذج Power BI الدلالية تقرأ من طبقة العرض فقط. تعريف واحد للإيراد، وتقويم واحد، وحقيقة واحدة.
ما الذي تغيّر
النتيجة القابلة للقياس هي السرعة ونحو $80K سنويًا أعادتها الأتمتة من ساعات المحللين والبنية التحتية. أما النتيجة الأهم فهي أن أرقام يوم الاثنين صارت متطابقة في كل مكان — استعادت المنصة ثقة التنفيذيين، وهذا هو الغرض الحقيقي من منصات التحليلات.