مهندس بيانات (بايثون) - انضمام فوري (3 أشهر)

الوصف الوظيفي

تبحث الجهة عن مهندس بيانات ذي خبرة يتمتع بخبرة تتراوح في تصميم حلول البيانات القابلة للتطوير وتطويرها وصيانتها. يجب أن يتمتع المرشح المثالي بخبرة قوية في تطوير Python و Pandas و NumPy و Airflow و BigQuery و SQL و API. سيلعب المرشح دورًا رئيسيًا في بناء خطوط أنابيب بيانات قوية، ومعالجة مجموعات البيانات الكبيرة، ودعم التطبيقات المهمة للأعمال المتعلقة بتحسين المخزون، وإدارة البيانات الرئيسية، والخدمات الخلفية. المسؤوليات الرئيسية • تصميم وتطوير وصيانة خطوط أنابيب ETL/ELT قابلة للتطوير لاستيعاب البيانات ومعالجتها. • بناء وتحسين سير عمل البيانات باستخدام Apache Airflow. • تطوير وصيانة حلول معالجة البيانات باستخدام Python و Pandas و NumPy. • تصميم وتحسين استعلامات SQL المعقدة ونماذج البيانات في BigQuery. • تطوير ودمج واجهات برمجة التطبيقات لدعم تبادل البيانات بين الأنظمة. • تنفيذ أطر استيعاب البيانات من مصادر داخلية وخارجية مختلفة. • إجراء تنقية البيانات وتحويلها والتحقق من صحتها لضمان دقة البيانات واتساقها. • تطوير وصيانة عمليات إدارة البيانات الرئيسية. • دعم مبادرات تحسين المخزون من خلال تنفيذ معالجة البيانات ومنطق الأعمال. • بناء وصيانة الخدمات الخلفية التي تمكن التطبيقات المستندة إلى البيانات. • مراقبة واستكشاف أخطاء خطوط أنابيب البيانات لضمان الموثوقية والأداء nce. • التعاون مع فرق متعددة الوظائف، بما في ذلك فرق المنتج والتحليلات والهندسة. • ضمان الالتزام بحوكمة البيانات والأمن وأفضل الممارسات. المتطلبات الفنية يجب أن يكون لديك مهارات • من الخبرة في هندسة البيانات أو الأدوار ذات الصلة. • خبرة عملية قوية مع: • بايثون • الباندا • نومبي • تدفق الهواء أباتشي • جوجل BigQuery • SQL • تطوير API والتكامل • • خبرة في تصميم وتنفيذ خطوط أنابيب ETL/ELT قابلة للتطوير. • فهم قوي لنمذجة البيانات، وتحويل البيانات، ومفاهيم قاعدة البيانات. • خبرة في العمل مع مجموعات البيانات واسعة النطاق وتحسين أداء الاستعلام. • الكفاءة مع أنظمة التحكم في الإصدار مثل Git. المهارات الجيدة • تجربة مع PySpark ومعالجة البيانات الموزعة. • الفهم الأساسي لمفاهيم التعلم الآلي وسير العمل. • الإلمام بأطر جودة البيانات وممارسات التحقق من صحة البيانات. • خبرة في تقنيات Docker والحاويات. • المعرفة بخطوط أنابيب CI/CD وممارسات DevOps. • خبرة في العمل في بيئات البيانات السحابية

المتطلبات

• درجة البكالوريوس في علوم الكمبيوتر، تكنولوجيا المعلومات، علوم البيانات، أو مجال ذي صلة
• مهارات تحليلية وحل المشكلات قوية
• قدرات الاتصال والتعاون ممتازة
• خبرة في العمل على منصات البيانات على مستوى المؤسسة والتطبيقات المستندة إلى البيانات

المهارات