مسرّع ترحيل Informatica إلى Databricks: كيف نقلت Emulus للاتصالات 2,100 تعيين في 7 دفعات

Table of Contents
مسرّع ترحيل Informatica إلى Databricks: كيف نقلت Emulus للاتصالات 2,100 تعيين في 7 دفعات
― بنهج مصنع التحويل، صنّف مسرّع Pulse Convert 76% من تعيينات PowerCenter ضمن 10 أنماط قياسية، فاكتمل الترحيل إلى Databricks خلال 18 أسبوعاً بنسبة تحويل آلي 88%، وانخفضت التكاليف بنسبة 53%
نبذة عن العميل
تقدم وحدة الاتصالات المتنقلة في Emulus خدمات الهاتف والبيانات في الكويت لأكثر من 1.6 مليون مشترك. تعتمد فرق الفوترة والتسويق والشبكة والامتثال على مستودع بيانات يُغذى من أنظمة الفوترة وإدارة العملاء وسجلات الشبكة.
التحدي
- 2,100 تعيين و470 مسار عمل في PowerCenter، تديرها فرقة من 6 مطورين.
- المعالجة الليلية تستغرق 7 ساعات، وسجلات الاستخدام اليومية تتجاوز 300 مليون سجل.
- فريق علوم البيانات يعمل على Databricks وينتظر وصول البيانات إلى المستودع ثم ينسخها.
- عقد ترخيص Informatica وخوادمها على وشك التجديد.
- محاولة سابقة للتحويل اليدوي نقلت 120 تعييناً فقط خلال 4 أشهر، فتوقف المشروع.
الحل ودور Pulse Convert
- الفهرسة: صدّر المسرّع كل الأصول وفهرسها وربطها بسجلات التشغيل، فتبين أن 380 تعييناً غير مستخدم.
- الأنماط: صُنّف 76% من التعيينات المتبقية ضمن 10 أنماط قياسية، منها التحميل التزايدي، والأبعاد المتغيرة، وتجميعات الاستخدام اليومي لكل مشترك، وتحويل ملفات سجلات الشبكة.
- القوالب: أُعد لكل نمط قالب Databricks معتمد بخطوط Lakeflow تصريحية، فتولّد التعيينات بملء القوالب بمعاملاتها.
- التحويل: تحولت التعيينات غير المطابقة لأي نمط على مستوى التحويلات مع مراجعة بشرية، وبلغت نسبة التحويل الآلي الإجمالية 88%.
- الاختبار: قارن إطار اختبار الانحدار جداول الوجهة لكل دفعة، ونجحت 92% من التعيينات من المحاولة الأولى.
- لوحة المصنع: تابعت الإدارة تقدم الترحيل أسبوعياً من لوحة تعرض حالة كل تعيين.
النتائج
- اكتمل ترحيل 1,720 تعييناً في 7 دفعات خلال 18 أسبوعاً.
- انخفضت المعالجة الليلية من 7 ساعات إلى ساعة و50 دقيقة.
- انخفضت تكاليف الترخيص والبنية بنسبة 53%.
- أصبحت بيانات الاستخدام متاحة لنماذج توقع الانسحاب في اليوم نفسه دون نسخ.
- أصبحت الشيفرة كلها في Git بهيكل موحد يسهل على أي مهندس صيانتها.
يقول مدير هندسة البيانات في وحدة الاتصالات لدى Emulus: "المحاولة الأولى علمتنا أن التحويل تعييناً تعييناً لا ينتهي. المصنع حوّل المشروع إلى خط إنتاج بأرقام واضحة كل أسبوع."
الأسئلة الشائعة
ابدأ الآن
- إثبات المفهوم المجاني (POC): إثبات المفهوم المجاني (Pulse Convert)
- الموقع الرسمي: innovationalofficesolution.com
- البريد الإلكتروني: Admin@innovationalofficesolution.com
مسرّع ترحيل Informatica PowerCenter إلى Databricks
نقل آلاف التعيينات وسير العمل من Informatica إلى مهام PySpark وDatabricks بنهج مصنع التحويل ودقة آلية تصل إلى 90%.