منصة بيانات للتجارة الإلكترونية على Google Cloud (GCP Data Platform)

وصف العمل

قمت ببناء منصة بيانات متكاملة وقابلة للتوسع لمعالجة بيانات التجارة الإلكترونية باستخدام خدمات Google Cloud.

تم تطوير Data Pipeline Serverless باستخدام Cloud Run و Pub/Sub لاستقبال البيانات من مصادر متعددة، ثم معالجتها وتخزينها في BigQuery. كما تم تصميم Data Lake باستخدام Google Cloud Storage.

تم إضافة طبقة API باستخدام FastAPI مع Firestore كـ Cache لتوفير استعلامات سريعة، بالإضافة إلى بناء Features تحليلية مثل تتبع الأسعار، تحليل المشاعر، وتقييم موثوقية البائعين.

مميزات المشروع:

بنية Serverless بالكامل لتقليل التكلفة

دعم Real-Time و Batch Processing

تحسين جودة البيانات (Deduplication + Error Handling)

API Layer للوصول السريع للبيانات

تحليلات متقدمة لدعم اتخاذ القرار