کیس اسٹڈی: ڈیٹا بیس محفوظ تھا، ETL نہیں — Emulus Consulting نے Oracle اور ODI کو Fabric پر کیوں منتقل کیا

Table of Contents
کیس اسٹڈی: ڈیٹا بیس محفوظ تھا، ETL نہیں — Emulus Consulting نے Oracle اور ODI کو Fabric پر کیوں منتقل کیا
― Fusion Middleware 12c کی سپورٹ دسمبر 2026 میں ختم — ODI کے ETL اور Oracle ڈیٹا ویئر ہاؤس، دونوں ایک ساتھ Fabric پر
ایک نظر میں (Executive Summary)
- پلیٹ فارم: Innovational Office Solution
- کلائنٹ: Emulus Consulting
- منتقل شدہ اثاثے: [X] ODI mappings، [X] packages، [X] load plans، [X] customized Knowledge Modules، [X] Oracle DWH ٹیبلز، [X] PL/SQL procedures
- خودکار درستگی: 70%–90%؛ باقی ماہرین کی تصدیق سے
- رابطہ: Admin@innovationalofficesolution.com
- مفت POC: AnyBI to Power BI & AnyETL to Fabric صفحہ
1. ایک تاریخ جو اکثر نظر انداز ہو جاتی ہے
Emulus Consulting کے کلائنٹ کی IT ٹیم Oracle ڈیٹا بیس کی سپورٹ کے بارے میں مطمئن تھی — Oracle 19c کی Premier Support 2029 کے آخر تک ہے۔ مگر ان کا ڈیٹا ویئر ہاؤس ایک اور Oracle پروڈکٹ سے لوڈ ہوتا تھا: Oracle Data Integrator (ODI) 12c۔
ODI، Oracle Fusion Middleware 12c کا حصہ ہے، اور Oracle کے مطابق Fusion Middleware 12c کی Premier Support دسمبر 2026 میں اور Extended Support دسمبر 2027 میں ختم ہو رہی ہے۔ اس کے بعد اس ورژن کے لیے نہ اپ ڈیٹس آئیں گے، نہ سیکیورٹی فکسز۔ اور اس کے نیچے WebLogic سرور بھی ہے — جس کی پیچنگ اور سیکیورٹی کا اپنا الگ بوجھ ہے۔
یعنی ڈیٹا بیس محفوظ تھا، مگر اس تک ڈیٹا پہنچانے والا انجن نہیں۔
2. فیصلہ: صرف ETL نہیں، پورا ڈیٹا ویئر ہاؤس
پہلا خیال ODI کو اگلے ورژن پر اپ گریڈ کرنے کا تھا۔ مگر جائزے سے ایک دلچسپ حقیقت سامنے آئی: ODI کی زیادہ تر "منطق" دراصل ODI میں نہیں تھی۔ ODI کا ELT طریقہ کار Knowledge Modules کے ذریعے SQL بنا کر خود Oracle ڈیٹا بیس پر چلاتا ہے — یعنی حساب کتاب Oracle ڈیٹا ویئر ہاؤس کر رہا تھا، اور ODI صرف ہدایت دے رہا تھا۔
اس لیے Emulus نے فیصلہ کیا کہ ETL اور ڈیٹا ویئر ہاؤس دونوں ایک ساتھ Microsoft Fabric پر جائیں۔ کلائنٹ پہلے ہی Power BI استعمال کر رہا تھا؛ ایک ہی Fabric کیپیسٹی پر ETL، ویئر ہاؤس اور رپورٹنگ — اور WebLogic کا انتظام ہمیشہ کے لیے ختم۔
3. ODI کی منطق کہاں چھپی تھی
| جگہ | کیا تھا |
|---|---|
| Mappings | سورس، joins، filters، expressions اور ٹارگٹ |
| Knowledge Modules (LKM / IKM / CKM) | لوڈنگ کا طریقہ، incremental update، SCD، data quality چیکس |
| Customized KMs | ادارے کی اپنی تبدیلیاں — سب سے کم دستاویزی حصہ |
| Packages | قدم بہ قدم ترتیب، variables، شرطیں |
| Load Plans | متوازی اور ترتیب وار رن، restart کے اصول |
| Variables اور Sequences | تاریخیں، رن نمبر، surrogate keys |
| Oracle DWH کے PL/SQL | ODI کے باہر، ڈیٹا بیس میں رکھی پروسیسنگ |
سب سے بڑا خطرہ customized IKMs تھے۔ دیکھنے میں mapping سادہ لگتی، مگر IKM کے اندر لکھی SCD یا incremental منطق ہی اصل نتیجہ طے کرتی تھی۔
4. منتقلی کیسے ہوئی
مرحلہ 1 — ریپوزٹری کا تجزیہ
ODI کی work repository سے mappings، packages، load plans اور KMs نکال کر Pulse Convert نے lineage گراف بنایا، اور ODI کی session logs سے رن فریکوئنسی دیکھی۔ [X]% mappings غیر فعال نکلیں۔
مرحلہ 2 — ڈیٹا کا راستہ
Oracle سورس سسٹمز سے ڈیٹا OneLake میں لانے کے لیے Fabric کی Oracle mirroring (LogMiner پر مبنی، آن پریمیسز ڈیٹا گیٹ وے کے ذریعے) اور بھاری بیچز کے لیے Copy job استعمال ہوئے۔
مرحلہ 3 — AI کے ذریعے تبدیلی
- Mappings + LKM → Fabric Data Factory کی Copy activity / Copy job
- Mappings + IKM (incremental update / SCD) → Fabric Warehouse کا T-SQL MERGE یا PySpark Delta MERGE
- CKM (data quality) → validation queries اور quarantine ٹیبلز
- Packages اور load plans → Data Factory پائپ لائنز، شرطیں اور متوازی شاخیں
- ODI variables → پائپ لائن پیرامیٹرز اور Variable Library
- DWH کا PL/SQL → T-SQL پروسیجرز یا PySpark نوٹ بکس
70%–90% منطق خودکار طور پر تبدیل ہوئی؛ customized IKMs ماہرین نے لائن بہ لائن جانچے۔
مرحلہ 4 — Medallion ڈیزائن
ODI کی staging (C$ اور I$ ٹیبلز) کی جگہ Bronze، صفائی اور SCD کے لیے Silver، اور رپورٹنگ کے لیے Gold۔ Power BI رپورٹس Gold پر Direct Lake سے جڑیں۔
مرحلہ 5 — متوازی رن (PulseQA)
دونوں نظام ایک ماہانہ کلوزنگ تک ساتھ چلے؛ ٹارگٹ ٹیبلز کی قطاریں، مجموعے، SCD کے ادوار اور data quality کے مسترد ریکارڈز کی تعداد خودکار ملائی گئی۔ Oracle کے '' = NULL رویے کو ہر string کالم پر جانچا گیا۔
5. ODI / Oracle سے Fabric: اجزاء کا نقشہ
| ODI / Oracle | Microsoft Fabric |
|---|---|
| Mapping | Copy job / Dataflow Gen2 / T-SQL / PySpark |
| LKM (لوڈنگ) | Copy activity / Oracle mirroring |
| IKM (incremental / SCD) | T-SQL MERGE / Delta MERGE |
| CKM (data quality) | validation queries + quarantine ٹیبلز |
| C$ / I$ staging ٹیبلز | Bronze لیئر |
| Package | Data Factory پائپ لائن |
| Load Plan | پائپ لائنز کی ترتیب اور متوازی شاخیں |
| ODI Variables / Sequences | پائپ لائن پیرامیٹرز / IDENTITY |
| ODI Agent + WebLogic | Fabric کیپیسٹی (SaaS، سرور نہیں) |
| Oracle DWH ٹیبلز | Fabric Warehouse / Lakehouse |
| PL/SQL procedures | T-SQL procedures / PySpark |
| Materialized Views | Gold ٹیبلز / Direct Lake ماڈلز |
6. نتائج
- [X] ODI mappings اور [X] PL/SQL procedures 70%–90% خودکار درستگی کے ساتھ منتقل
- Fusion Middleware 12c کی Premier Support ختم ہونے سے پہلے cutover
- WebLogic اور ODI Agent سرورز کا خاتمہ
- رات کی لوڈنگ [X] گھنٹوں سے [X] منٹ
- Oracle Middleware اور DWH کیپیسٹی کی لاگت میں [X]% کمی
اپنے IKMs ہمیں دکھائیں
customized Knowledge Module والی 5 mappings بھیجیں — ہم Fabric ورژن اور موازنہ رپورٹ مفت دکھائیں گے۔
- مفت POC: innovationalofficesolution.comAnyBI-To-PowerBI-and-AnyETL-To-Fabric/' target='_blank' rel='noopener noreferrer' class='text-teal-600 hover:underline font-medium'>مفت POC (Pulse Convert)
- ویب سائٹ: innovationalofficesolution.com
- ای میل: Admin@innovationalofficesolution.com
Oracle DWH اور ODI جابز کو Microsoft Fabric پر منتقل کریں
Fusion Middleware سپورٹ ختم ہونے سے پہلے اپنے ETL اور ڈیٹا ویئر ہاؤس کو ایک جدید F SKU کیپیسٹی پر یکجا کریں۔ ODI پیکیجز اور اوریکل ٹیبلز کو Fabric Data Factory میں منتقل کریں۔