في المكتب دوام كامل
--
Datamatics Technologies

تفاصيل الوظيفة

الوصف الوظيفي – مهندس بيانات

نوع التوظيف: دوام كامل
موقع العمل: المملكة العربية السعودية
الخبرة المطلوبة: خبرة عملية في تطوير Spark، وحلول تكامل Informatica، ومنصات البيانات المؤسسية.
سنوات الخبرة: من 5 إلى 10 سنوات

نظرة عامة على الدور الوظيفي

نحن نبحث عن مهندس بيانات لبناء وتكوين وتحسين أعباء عمل استيعاب البيانات وتحويلها واستهلاكها على منصة بحيرة بيانات (Lakehouse) حديثة داخل المؤسسة. يجب أن يتمتع المرشح المثالي بخبرة عملية قوية في التطوير القائم على Spark، وتنفيذ بحيرات البيانات المؤسسية/بحيرات البيانات (Lakehouse)، وحلول التكامل القائمة على Informatica.

المسؤوليات الرئيسية
  • تصميم وتطوير خطوط استيعاب وتحويل بيانات قابلة للتوسع
  • بناء وتحسين وصيانة أعباء عمل ETL/ELT القائمة على Spark
  • تطوير وإدارة نماذج البيانات ومجموعات البيانات باستخدام جداول Apache Iceberg
  • تنفيذ ودعم سير عمل تكامل البيانات باستخدام Informatica
  • تمكين التحليلات واستهلاك البيانات من خلال Denodo أو Starburst أو Dremio
  • تطوير خطوط بيانات آمنة وخاضعة للحوكمة وقابلة للتوسع تتماشى مع معايير المؤسسة
  • دعم متطلبات معالجة البيانات الدفعية وشبه الفورية
  • تنفيذ ضوابط جودة البيانات وإدارة البيانات الوصفية والتحقق منها
  • التعاون مع مهندسي المنصة في أنشطة النشر والتكامل والتشغيل
  • دعم مبادرات الترحيل والاختبار وطرح الإنتاج
  • استكشاف أخطاء أداء خطوط البيانات وإصلاحها وتحسينها من حيث الموثوقية وقابلية التوسع
المهارات الأساسية المطلوبة
  • Apache Spark (PySpark و/أو Scala Spark)
  • Apache Iceberg
  • Informatica Data Integration
  • MinIO Object Storage
  • Denodo
  • SQL ونمذجة البيانات
  • مفاهيم مستودعات البيانات
  • تطوير ETL/ELT
  • التحكم في الإصدارات عبر Git
المهارات الإضافية (يفضل وجودها)
  • Starburst و/أو Dremio
  • حوكمة البيانات وإدارة البيانات الوصفية
  • أطر جودة البيانات
  • CI/CD لخطوط البيانات
  • Python
  • Kafka أو تقنيات البث (Streaming)
  • أنماط معمارية بحيرة البيانات (Lakehouse)
  • خبرة في تنفيذ بحيرات البيانات المؤسسية ومنصات الـ Lakehouse
  • ضبط الأداء وتحسين أعباء عمل البيانات واسعة النطاق
انضم لقناتنا على تيليجرام تابع أحدث الوظائف فور نشرها انضم

وظائف مشابهة

Datamatics Technologies
مهندس بيانات
حول Datamatics Technologies
السعودية, الاحساء
لاسلكي