Wuzzuf Data Engineer Job Market Analysis Pipeline

قمت بتطوير مشروع لتحليل سوق وظائف الـ Data Engineering من خلال سحب البيانات من موقع Wuzzuf باستخدام Python و Beautiful Soup، ثم تنظيف البيانات وتحليلها واستخراج أهم الإحصائيات منها. المشروع مر بعدة مراحل بداية من جمع البيانات الخام الخاصة بالوظائف مثل: اسم الوظيفة اسم الشركة مكان الوظيفة نوع الوظيفة تاريخ النشر بعد ذلك تم تنفيذ مرحلة تنظيف ومعالجة البيانات باستخدام Pandas، وتشمل: معالجة القيم المفقودة حذف البيانات المكررة توحيد تنسيق النصوص تحويل التواريخ النسبية مثل "منذ 5 ساعات" إلى تواريخ فعلية ثم تم إجراء تحليل استكشافي للبيانات (EDA) لاستخراج معلومات مهمة مثل: أكثر الشركات توظيفًا أكثر المحافظات أو المدن طلبًا للوظائف أكثر أنواع الوظائف انتشارًا أكثر المسميات الوظيفية تكرارًا تحليل نشاط نشر الوظائف بمرور الوقت كما تم استخدام مكتبات Visualization مثل Matplotlib لعرض النتائج بشكل بصري من خلال الرسوم البيانية. المشروع يمثل Workflow متكامل مشابه لما يحدث في بيئة العمل الحقيقية بداية من جمع البيانات وحتى استخراج Insights تساعد في فهم سوق العمل واتخاذ قرارات مبنية على البيانات.