سكربت أوتوماتيكي لتجهيز بيئة Data Engineering

قمت بتطوير Bash Script متكامل يقوم بتثبيت وضبط أهم أدوات الـ Data Engineering والـ Data Science بشكل أوتوماتيكي على أنظمة Linux. الهدف من المشروع هو توفير الوقت والجهد على المطورين والباحثين من خلال إعداد بيئة عمل احترافية بضغطة زر واحدة.

المميزات:

تثبيت الأدوات الأساسية: Python, pip, Git, Docker, PostgreSQL, Java, Jupyter Notebook, AWS CLI, Apache Airflow.

تثبيت Apache Spark وضبط متغيرات البيئة تلقائياً.

وضعين للتشغيل:

Auto Mode لتثبيت جميع الأدوات دفعة واحدة.

Interactive Mode لاختيار الأدوات المراد تثبيتها.

تسجيل نتائج التثبيت في ملف install_log.txt لمراجعة أي مشكلة.

كود منظم وسهل التعديل لإضافة أدوات جديدة عند الحاجة.