ETL Pipeline with Slowly Changing Dimension (SCD) Implementation

قمت بتصميم وتنفيذ ETL pipeline باستخدام SQL Server Integration Services لاستخراج البيانات وتحويلها وتحميلها داخل Data Warehouse باستخدام Microsoft SQL Server. المشروع شمل: استخراج البيانات من مصادر متعددة. استخدام Derived Column لتنظيف البيانات وإنشاء أعمدة محسوبة. تنفيذ Data Conversion لتحويل أنواع البيانات وضمان التوافق مع قاعدة البيانات. تطبيق مفهوم Slowly Changing Dimension (SCD) لإدارة: New Records Historical Changes Updating Existing Records استخدام OLE DB Command لتحديث السجلات الحالية. استخدام Union All لدمج البيانات من أكثر من مسار داخل الـ pipeline. تحميل البيانات النهائية إلى جدول الـ destination داخل الـ Data Warehouse. التقنيات المستخدمة: SQL Server Integration Services, Microsoft SQL Server, SQL, Data Warehousing, ETL, Slowly Changing Dimension (SCD) الهدف: ضمان تحديث البيانات التاريخية والحالية بشكل دقيق داخل الـ Data Warehouse وتحسين جودة البيانات أثناء عمليات الـ ETL.