KEMET — منصة سياحية ذكية مدعومة بالذكاء الاصطناعي (Data Pipeline)
تفاصيل العمل
KEMET منصة سياحية ذكية بتساعد السياح يكتشفوا مصر من خلال تطبيق واحد موحّد — فيه شات بوت ذكاء اصطناعي (RAG-based)، مخطط رحلات ذكي (Smart Trip Planner)، داشبورد سياحي حي، وأدلة كاملة للفنادق والمطاعم والمتاحف والمعالم الأثرية والشواطئ. دوري في المشروع كان Data Engineer، وكنت مسؤول عن بناء خط أنابيب البيانات كاملًا من الصفر: - بناء Web Scrapers أوتوماتيكية (Selenium) شغالة أسبوعيًا داخل Docker container مرفوع على Docker Hub، بتجمع بيانات حقيقية عن الفنادق والمطاعم والمتاحف والمعالم من مصادر موثوقة. - تصميم Medallion Architecture كاملة (Bronze → Silver → Gold) على Azure Databricks باستخدام PySpark، شاملة تنظيف البيانات، توحيد أسماء المحافظات، إزالة التكرار، ومعالجة القيم الناقصة. - تصميم Galaxy Schema لطبقة الـ Gold (fact_attractions, fact_hotels, fact_restaurants, fact_beaches) بأبعاد موحدة، لدعم الاستعلامات التحليلية السريعة والداشبورد الحي. - تغذية البيانات النهائية لـ Flask REST API (مرفوع على Railway) بيخدم الـ Frontend (React، مرفوع على Vercel) ونظام الـ RAG بتاع الشات بوت. النتيجة: منصة كاملة شغالة Live، بتحديث بياناتها أوتوماتيكيًا كل أسبوع من غير أي تدخل بشري.
بطاقة العمل
طلب عمل مماثل