في المكتب دوام كامل
Datamatics Technologies -
السعودية , الرياض
--
Datamatics Technologies

تفاصيل الوظيفة

الوصف الوظيفي – مهندس بيانات

نوع التوظيف: دوام كامل
موقع العمل: المملكة العربية السعودية
الخبرة المطلوبة: خبرة عملية في تطوير Spark، وحلول التكامل باستخدام Informatica، ومنصات البيانات المؤسسية.
سنوات الخبرة: 5 إلى 10 سنوات

نظرة عامة على الدور

نحن نبحث عن مهندس بيانات لبناء وتكوين وتحسين عمليات استيعاب البيانات وتحويلها واستهلاكها على منصة بحيرة بيانات حديثة (Lakehouse) داخل الشركة. يجب أن يتمتع المرشح المثالي بخبرة عملية قوية في التطوير القائم على Spark، وتنفيذ بحيرات البيانات المؤسسية، وحلول التكامل باستخدام Informatica.

المسؤوليات الرئيسية
  • تصميم وتطوير خطوط أنابيب استيعاب وتحويل بيانات قابلة للتوسع
  • بناء وتحسين وصيانة عمليات ETL/ELT القائمة على Spark
  • تطوير وإدارة نماذج البيانات ومجموعات البيانات باستخدام جداول Apache Iceberg
  • تنفيذ ودعم سير عمل تكامل البيانات باستخدام Informatica
  • تمكين التحليلات واستهلاك البيانات من خلال Denodo أو Starburst و/أو Dremio
  • تطوير خطوط بيانات آمنة وخاضعة للحوكمة وقابلة للتوسع بما يتماشى مع معايير المؤسسة
  • دعم متطلبات معالجة البيانات المجمعة (Batch) وشبه الفورية
  • تنفيذ ضوابط جودة البيانات وإدارة البيانات الوصفية والتحقق منها
  • التعاون مع مهندسي المنصة في أنشطة النشر والتكامل والتشغيل
  • دعم مبادرات الترحيل والاختبار والإطلاق في بيئة الإنتاج
  • استكشاف أخطاء خطوط أنابيب البيانات وإصلاحها وتحسين أدائها وموثوقيتها وقابليتها للتوسع
المهارات الأساسية المطلوبة
  • Apache Spark (PySpark و/أو Scala Spark)
  • Apache Iceberg
  • تكامل البيانات باستخدام Informatica
  • تخزين الكائنات MinIO
  • Denodo
  • SQL ونمذجة البيانات
  • مفاهيم مستودعات البيانات
  • تطوير ETL/ELT
  • نظام التحكم في الإصدار Git
المهارات الإضافية المفضلة
  • Starburst و/أو Dremio
  • حوكمة البيانات وإدارة البيانات الوصفية
  • أطر عمل جودة البيانات
  • التطوير والتكامل المستمر (CI/CD) لخطوط أنابيب البيانات
  • Python
  • Kafka أو تقنيات البث (Streaming)
  • أنماط بنية بحيرة البيانات (Lakehouse)
  • خبرة في تنفيذ بحيرات البيانات المؤسسية
  • ضبط الأداء وتحسين أعباء عمل البيانات واسعة النطاق
انضم لقناتنا على تيليجرام تابع أحدث الوظائف فور نشرها انضم

وظائف مشابهة

Datamatics Technologies
مهندس بيانات
حول Datamatics Technologies
السعودية, الرياض
لاسلكي