Data Pipeline using Apache Airflow: ServiceNow to PostgreSQL

باستخدام Apache Airflow، تم تطوير مشروع خط أنابيب بيانات لسحب البيانات من منصة ServiceNow، وتحديدًا جدول "incidents"، عبر واجهة برمجة تطبيقات REST الخاصة بها. بعد ذلك، يتم تحليل البيانات المستخرجة وتحويلها لتعيين حقلين، وهما "priority" و "status"، من أعداد صحيحة إلى سلاسل نصية بناءً على قائمة تعيين محددة. وأخيرًا، يتم تحميل البيانات المحولة إلى جدول قاعدة بيانات PostgreSQL. يتم استخدام Docker لبدء وتشغيل خادم Airflow على جهازك المحلي.