مشروع بيانات التجارة الإلكترونية - SoftCart

في هذا المشروع، تم بناء بنية أساسية لبيانات شركة تجارة إلكترونية تُدعى SoftCart. يركز المشروع على معالجة البيانات باستخدام أدوات وتقنيات متقدمة. تم استخدام قاعدة بيانات OLTP (MySQL) لتخزين البيانات المعاملاتية مثل المخزون والمبيعات، بينما تم استخدام MongoDB لتخزين بيانات كتالوج المنتجات.

تم بناء مستودع بيانات مرحلي باستخدام PostgreSQL لتحضير البيانات قبل نقلها إلى مستودع البيانات الإنتاجي . لتحليل البيانات الكبيرة، تم استخدام Hadoop وSpark لتقديم رؤى تحليلة فعالة. بالإضافة إلى ذلك، تم إنشاء لوحات معلومات ذكية باستخدام Google Looker.

تضمن المشروع أيضًا استخدام Apache Airflow لبناء وتنسيق أنابيب البيانات التي تقوم باستخراج البيانات من المصادر المختلفة ونقلها عبر مراحل التحويل والتحميل (ETL).

هذا المشروع يعكس القدرات في تصميم وتنفيذ بنية تحتية لبيانات معقدة باستخدام مجموعة واسعة من الأدوات مثل:

MySQL

MongoDB

PostgreSQL

Hadoop

Apache Spark

IBM Cognos Analytics

Apache Airflow

النتائج: تم إنشاء نظام بيانات متكامل يسمح بإدارة وتحليل بيانات التجارة الإلكترونية بشكل سلس وفعال، مع إمكانية التوسع وتحسين الأداء.