بناء خط أنابيب بيانات للكهرباء باستخدام Python وSQL Server

مشروع Data Engineering متكامل لتنفيذ عملية ETL بدايةً من استخراج بيانات استهلاك الكهرباء من API، ثم تنظيف وتحويل البيانات باستخدام Python وPandas، والتحقق من جودة البيانات، وأخيرًا تحميلها إلى Microsoft SQL Server مع منع تكرار السجلات وتسجيل عمليات التنفيذ والأخطاء.