نظام أتمتة معالجة البيانات الضخمة (End-to-End Data Pipeline). نظام أتمتة معالجة البيانات الضخمة (End-to-End Data Pipeline). نظام أتمتة معالجة البيانات الضخمة (End-to-End Data Pipeline). نظام أتمتة معالجة البيانات الضخمة (End-to-End Data Pipeline).
تفاصيل العمل

قمت ببناء نظام متكامل لمعالجة بيانات تجارة تجزئة ضخمة (أكثر من 100 ألف سجل) باستخدام معمارية Medallion (Bronze, Silver, Gold). أهم مميزات المشروع: 1-التنظيف والفرز (Silver Layer): معالجة الأخطاء وتوحيد تنسيقات البيانات لضمان دقة التقارير. 2-مستودع البيانات (Gold Warehouse): تحويل الملفات الخام لبيانات مهيكلة داخل SQLite للوصول السريع للمعلومات. 3-لوحة تحكم (Dashboard): استخراج تقارير تفاعلية توضح أداء المدن وسلوك المستخدمين باستخدام SQL Views. 4-الأداء: تم تحسين الكود ليعالج آلاف السجلات في أقل من ثانية باستخدام Node.js.

شارك
بطاقة العمل
تقييم المستقل
تاريخ النشر
منذ شهرين
المشاهدات
72
المستقل
Mohamed Mahmoud
Mohamed Mahmoud
مهندس بيانات Data
طلب عمل مماثل
شارك
مركز المساعدة