في المكتب دوام كامل
robusta -
السعودية , الرياض
--
robusta

تفاصيل الوظيفة

وصف الوظيفة

نحن نبحث عن مهندس بيانات أول ذو خبرة لقيادة تصميم وتطوير وتوسيع نطاق منصة Data Lakehouse السحابية من الجيل التالي على منصة Google Cloud Platform (GCP).
في هذا الدور، ستلعب دوراً أساسياً في تحديث بنيتنا التحتية للبيانات، وبناء خطوط أنابيب ELT/ETL قوية، وإنشاء معايير نمذجة بيانات على مستوى المؤسسات لتمكين التحليلات، وتعلم الآلة، وذكاء الأعمال.
إذا كنت شغوفاً بتنسيقات الجداول مفتوحة المصدر الحديثة، والحوسبة الموزعة عالية الأداء، وموثوقية البيانات، فنحن نود انضمامك إلى فريقنا.
المسؤوليات الرئيسية • هندسة وتطوير Lakehouse: تصميم ونشر وصيانة نظام Lakehouse بيئي قابل للتوسع قائم على GCP، مع الاستفادة من Apache Iceberg لتحقيق اتساق المعاملات، والرجوع بالزمن (time-travel)، وإدارة فعالة للتخزين.
• هندسة خطوط الأنابيب: تصميم وبناء وتحسين خطوط أنابيب بيانات ETL/ELT عالية الإنتاجية باستخدام Python وApache Airflow لتنسيق تدفقات العمل المعقدة ذات الاعتمادية المتبادلة.
• معالجة البيانات الضخمة: تنفيذ أحمال عمل لمعالجة البيانات الموزعة على نطاق واسع وخطوط أنابيب التحويل باستخدام Apache Spark.
• مستودعات البيانات والتحليلات: الاستفادة من BigQuery للاستعلامات التحليلية عالية الأداء، وتحسين التكلفة، وإدارة الأقسام/المجموعات، وتوفير البيانات المهيكلة للمستهلكين في المراحل اللاحقة.
• التحويل والجودة: كتابة كود تحويل نظيف وقابل للاختبار باستخدام dbt (أداة بناء البيانات)، مع دمج اختبارات البيانات الآلية، والتوثيق، وتتبع أصل البيانات (lineage tracking).
• نمذجة البيانات: قيادة جهود نمذجة البيانات البُعدية والدلالية (مخططات النجمة/ندفة الثلج، جدول واحد كبير، وهيكلية الميداليات في Lakehouse) لضمان أداء استعلام عالٍ وسهولة استخدام الأعمال بسلاسة.
• ضبط الأداء وإتقان SQL: كتابة وتحسين واستكشاف أخطاء استعلامات SQL المعقدة لضمان زمن وصول منخفض ومعالجة فعالة من حيث التكلفة عبر مجموعات البيانات الكبيرة.
• التعاون: الشراكة الوثيقة مع علماء البيانات، وفرق التحليلات، ومديري المنتجات لفهم متطلبات البيانات وتقديم منتجات بيانات قوية وجاهزة للإنتاج.
• أكثر من 3 سنوات من الخبرة العملية في تصميم وتنفيذ منصات وخطوط أنابيب بيانات على مستوى المؤسسات.
• منصة سحابية: خبرة إنتاجية مثبتة في خدمات البيانات الأساسية لـ Google Cloud Platform (GCP) (BigQuery, Cloud Storage, Dataflow/Dataproc, IAM).
• Lakehouse وتنسيقات الجداول: فهم عميق لمفاهيم lakehouse الحديثة وخبرة عملية في Apache Iceberg.
• التحويل والتنسيق: كفاءة متقدمة في dbt لتحويلات خطوط الأنابيب وApache Airflow لتنسيق سير العمل.
• البيانات الضخمة والحوسبة: معرفة عملية قوية بـ Apache Spark لمعالجة البيانات الموزعة.
• البرمجة والاستعلام: o مهارات برمجة Python المتقدمة لمهام هندسة البيانات وتطوير المشغلات المخصصة.
o قدرات كتابة استعلامات SQL وضبط الأداء على مستوى الخبراء.
• نمذجة البيانات: خبرة مثبتة في النمذجة البُعدية، ومفاهيم مستودعات البيانات، وتصميم المخططات لأحمال العمل التحليلية.
• المنهجيات: فهم قوي لأنماط تصميم ETL/ELT الحديثة، وCI/CD لخطوط أنابيب البيانات، وحوكمة البيانات، وأفضل ممارسات جودة البيانات.

المرشح المفضل

سنوات الخبرة

لا يشترط وجود خبرة

الدرجة العلمية

درجة البكالوريوس / دبلوم عالي

انضم لقناتنا على تيليجرام تابع أحدث الوظائف فور نشرها انضم

وظائف مشابهة

robusta
مهندس بيانات أول - (GCP وهيكلية Lakehouse) - في الموقع - Octopus by RTG
حول robusta
السعودية, الرياض