مسرّع ترحيل Oracle إلى Databricks Lakehouse: كيف نقل مصرف Emulus الإسلامي مستودع بياناته من Exadata

Table of Contents
مسرّع ترحيل Oracle إلى Databricks Lakehouse: كيف نقل مصرف Emulus الإسلامي مستودع بياناته من Exadata
― مستودع بيانات بحجم 24 تيرابايت و1,900 جدول و330 حزمة PL/SQL وسياسات VPD لعزل الفروع انتقل بمساعدة مسرّع Pulse Convert إلى Databricks خلال 15 أسبوعاً، فانخفضت المعالجة الليلية من 5 ساعات و30 دقيقة إلى 75 دقيقة
نبذة عن العميل
يقدم المصرف الإسلامي التابع لمجموعة Emulus في المملكة العربية السعودية خدمات التمويل والحسابات المتوافقة مع الشريعة، عبر 64 فرعاً، لأكثر من 900 ألف عميل. تعتمد إدارات المخاطر والامتثال والمالية والتسويق على مستودع بيانات مركزي على Oracle Exadata.
التحدي
- جهاز Exadata يقترب من نهاية دورة دعمه، وتجديده يتطلب استثماراً كبيراً.
- 330 حزمة PL/SQL تحسب أرباح المرابحة والإجارة، وتوزيع الأرباح على حسابات الاستثمار، والتقارير التنظيمية.
- سياسات VPD تعزل بيانات كل فرع ومنطقة.
- فريق المخاطر يحتاج إلى بناء نماذج الإنذار المبكر للتعثر على البيانات نفسها، لكنه ينسخها إلى بيئة منفصلة.
- أسماء العملاء والعناوين بالعربية بترميز AR8MSWIN1256.
الحل ودور Pulse Convert
- التقييم: حلل المسرّع المخططات والحزم وسجل AWR، فتبين أن 410 جداول و52 حزمة غير مستخدمة.
- Unity Catalog: صُممت كتالوجات للبيئات ومخططات للطبقات، وتحولت أدوار Oracle إلى مجموعات.
- VPD: تحولت سياسات عزل الفروع إلى مرشحات صفوف في Unity Catalog، وتحول إخفاء أرقام الهويات إلى أقنعة أعمدة.
- تحويل الشيفرة: تحولت 278 حزمة إلى PySpark وSpark SQL بنسبة تحويل آلي 82%، مع إعادة كتابة حلقات المؤشرات في حساب توزيع الأرباح كعمليات على المجموعات.
- الترميز: قُرئت البيانات بترميزها الأصلي، ولم تعد هناك قيود أطوال لأن النوع STRING لا يفرض طولاً.
- الأداء: طُبق التجميع السائل على أعمدة رقم العميل والتاريخ والفرع بدلاً من الفهارس.
- المطابقة: طُوبقت أرباح حسابات الاستثمار لكل فترة توزيع خلال ستة أشهر سابقة حتى الهللة.
النتائج
- انخفضت المعالجة الليلية من 5 ساعات و30 دقيقة إلى 75 دقيقة.
- تجنب المصرف تجديد جهاز Exadata، بتوفير يقارب 44% من تكلفة المنصة على خمس سنوات.
- أصبح فريق المخاطر يبني نماذج الإنذار المبكر على البيانات نفسها دون نسخ.
- تحسّن الكشف المبكر عن حالات التعثر، فارتفعت نسبة الحالات المكتشفة قبل 90 يوماً من 41% إلى 63%.
- طُبقت ضوابط عزل الفروع نفسها على كل أدوات الاستهلاك.
يقول رئيس إدارة البيانات في المصرف: "كان عزل بيانات الفروع شرطاً لا نقاش فيه. انتقل كما هو إلى Unity Catalog، وأصبح يُطبّق على التقارير ودفاتر علوم البيانات معاً."
الأسئلة الشائعة
ابدأ الآن
- إثبات المفهوم المجاني (POC): إثبات المفهوم المجاني (Pulse Convert)
- الموقع الرسمي: innovationalofficesolution.com
- البريد الإلكتروني: Admin@innovationalofficesolution.com
مسرّع ترحيل Oracle وExadata إلى Databricks Lakehouse
تخفيض تكاليف صيانة أجهزة Exadata وتحديث مستودع البيانات إلى Databricks مع الحفاظ على سياسات الأمان والحوكمة عبر Unity Catalog.