ملخص الوظيفة
نحن نبحث عن مسؤول أنظمة حوسبة عالية الأداء (HPC) أول يتمتع بمهارات عالية وحماس كبير للانضمام إلى مختبر جامعة الملك عبد الله للعلوم والتقنية للحوسبة الفائقة (KSL). سيكون المرشح الناجح مسؤولاً عن إدارة مجموعة حوسبة عالية الأداء تتكون من حوالي 600 عقدة CPU وGPU، وأنظمة تخزين للحوسبة عالية الأداء، وشبكات InfiniBand وEthernet، بالإضافة إلى التعامل مع المشكلات التشغيلية اليومية. يوفر هذا الدور دعماً واسعاً للباحثين والمستخدمين النهائيين في مجالات العلوم الحسابية، والهندسة، وتحليل البيانات الضخمة، وأعباء عمل الذكاء الاصطناعي/تعلم الآلة.
المسؤوليات الرئيسية - تشمل على سبيل المثال لا الحصر -
- تقديم دعم تقني فعال وفي الوقت المناسب للمستخدمين عبر الهاتف، والحضور الشخصي، والبريد الإلكتروني، ونظام التذاكر لجميع أنواع الاستفسارات مع الحفاظ على معايير عالية لخدمة العملاء.
- تثبيت وتكوين وإدارة الأنظمة الفرعية للحوسبة عالية الأداء بما في ذلك عقد الحوسبة، وأنظمة التخزين عالية الأداء، وشبكات InfiniBand وEthernet، وأدوات إدارة التكوين (مثل Ansible وPuppet).
- نشر وإدارة برمجيات إدارة المجموعات (Cluster)، وأدوات المراقبة، والخدمات الداعمة لتشغيل مجموعات الحوسبة عالية الأداء.
- تثبيت وإدارة برنامج جدولة أعباء العمل Slurm، وإدارة سياسات جودة الخدمة (QOS)، والحسابات، والفوترة، ونصوص الأتمتة ذات الصلة (باستخدام لغتي Python وC++).
- تطوير وصيانة نصوص الأتمتة باستخدام Bash وPython لتبسيط مهام إدارة النظام.
- نشر وإدارة بيئات الحاويات (Singularity/Apptainer, Docker) لأعباء عمل الحوسبة عالية الأداء.
- إجراء اختبارات الأداء الدورية لمكونات نظام الحوسبة عالية الأداء مثل وحدة المعالجة المركزية (CPU)، والذاكرة، وشبكة InfiniBand، والتخزين لضمان الأداء الأمثل وتحديد فرص الضبط عبر طبقات الأجهزة والتعريفات والتطبيقات.
- تطبيق أفضل ممارسات الأمن بما في ذلك تأمين العقد، وتحديث نواة النظام (Kernel patching)، والامتثال عبر جميع الأنظمة.
- إدارة أنظمة الملفات المتوازية مثل Lustre أو GPFS أو Weka أو Vast، بما في ذلك ضبط الأداء وتخطيط السعة.
- دعم أنشطة البحث في العلوم الحسابية، والهندسة، وتحليل البيانات، والذكاء الاصطناعي/تعلم الآلة بشكل مباشر من خلال العمل الوثيق مع أعضاء هيئة التدريس والباحثين والشركاء المتعاونين والشركاء الصناعيين بالتنسيق مع فرق دعم التطبيقات.
- تطوير الأدوات البرمجية والمرافق حسب الحاجة لدعم المشاريع البحثية على أنظمة المجموعات والأنظمة الفرعية.
- قيادة مشاريع إثبات المفهوم وتقييمات التقنية من البداية إلى النهاية، والبحث عن أفضل ممارسات الصناعة، والدعوة إلى تحسينات النظام.
- التنسيق مع البائعين ومقدمي الخدمات الخارجيين للإبلاغ عن المشكلات وحلها في الوقت المناسب.
- تطوير وصيانة وثائق المستخدم، وإجراءات التشغيل القياسية، والمواد التدريبية في الويكي الداخلي.
- البقاء في طليعة تطورات الحوسبة عالية الأداء من خلال التعلم المستمر، ومؤتمرات الصناعة، والتعاون المهني، مع قيادة مبادرات اختبار الأداء لإبلاغ قرارات شراء الأجهزة المستقبلية.
الكفاءات
- خبرة في دعم مستخدمي العلوم الحسابية والهندسة، وتحليل البيانات، وتطبيقات ومكتبات الذكاء الاصطناعي في بيئات الحوسبة عالية الأداء المختلفة.
- خبرة قوية في إدارة أنظمة Linux (RHEL أو Rocky Linux أو CentOS) في بيئات الحوسبة عالية الأداء واسعة النطاق.
- إتقان تطبيقات ونماذج برمجة الحوسبة عالية الأداء (Fortran, C/C++, Python, MPI, OpenMP, CUDA, OpenACC).
- سجل حافل في إدارة أنظمة الحوسبة عالية الأداء المعقدة، بما في ذلك أنظمة الملفات المتوازية، وجدولة المهام، وشبكات InfiniBand/Ethernet، وأنظمة المراقبة.
- خبرة في أدوات إدارة التكوين (Ansible أو Puppet أو ما يعادلها).
- الإلمام بالعلوم الحسابية، وتحليل البيانات، وتطبيقات ومكتبات الذكاء الاصطناعي/تعلم الآلة المستخدمة في بيئات الحوسبة عالية الأداء.
- معرفة مبادئ وممارسات إدارة المشاريع.
- قدرة مثبتة على دعم الأنشطة البحثية في بيئة حوسبة عالية الأداء تعاونية للغاية.
- مهارات تحليلية قوية ومهارات في حل المشكلات واتخاذ القرار.
- تحديد وتنفيذ تحسينات النظام بشكل استباقي؛ اتخاذ المبادرة وإكمال المهام حتى النهاية.
- القدرة على إدارة مشاريع متعددة متزامنة وتقديم نتائج عالية الجودة ضمن المواعيد النهائية.
- قدرة مثبتة على التعاون بين الوظائف مع الباحثين وفرق التطبيقات والبائعين.
- الفعالية في بيئات العمل متعددة الثقافات والدولية.
- مهارات تواصل ممتازة باللغتين الإنجليزية والعربية (شفوياً وكتابياً)، بما في ذلك القدرة على إعداد وتقديم التقارير والعروض التقديمية الفنية.
المؤهلات
متطلبات التعليم، الحد الأدنى:
درجة البكالوريوس أو الماجستير في علوم/هندسة الحاسب، أو نظم المعلومات، أو ما يعادلها
الخبرة
متطلبات الخبرة، الحد الأدنى:
- خمس سنوات من الخبرة في دعم منصات الحوسبة واسعة النطاق والأنظمة الفرعية ذات الصلة.
- خبرة في استكشاف مشكلات الأجهزة المعقدة وإصلاحها وتوثيق تحليل الأسباب الجذرية.
- خبرة في إدارة أنظمة التخزين المتوازية (Lustre أو GPFS أو Weka أو Vast أو ما شابه ذلك).
- خبرة في اختبار أداء مكونات نظام الحوسبة عالية الأداء (CPU، الذاكرة، InfiniBand، التخزين).
- خبرة في إدارة برامج جدولة أعباء العمل (Slurm أو LSF أو PBS).
- خبرة قوية في إدارة أنظمة Linux (RHEL أو Rocky Linux أو CentOS).
- خبرة في أدوات إدارة التكوين مثل Ansible أو Puppet.
- القدرة على التنسيق مع الباحثين وفرق دعم التطبيقات والبائعين لحل المشكلات المعقدة وإتمامها.
- قدرة مثبتة على التعاون بين الوظائف وقيادة المبادرات حتى الاكتمال.
- تعتبر المعرفة بـ Kubernetes ومنصات تنسيق الحاويات ميزة إضافية.
Position Summary
We are seeking a highly motivated and skilled Senior HPC Systems Administrator to join the KAUST Supercomputing Laboratory (KSL). The successful candidate will be responsible for managing an HPC cluster of approximately 600 CPU and GPU nodes, HPC storage systems, InfiniBand and Ethernet networks, and day-to-day operational issues. The role provides broad support to researchers and end-users across computational science, engineering, big data analysis, and artificial intelligence/machine learning workloads.
Major Responsibilities – include but are not limited to -
- Provide timely and effective user support via telephone, walk-in, email, and ticketing system for all inquiry types while maintain high customer service standards.
- Install, configure, and manage HPC subsystems including compute nodes, high-performance storage systems, InfiniBand, Ethernet, and configuration management tools (e.g., Ansible, Puppet).
- Deploy and manage cluster management software, monitoring tools, and supporting services for operating HPC clusters.
- Install and administer the Slurm workload manager, manage QOS policies, accounts, accounting, and related automation scripts (Python and C++).
- Develop and maintain automation scripts in Bash and Python to streamline system administration tasks.
- Deploy and manage container environments (Singularity/Apptainer, Docker) for HPC workloads.
- Benchmark HPC system components like CPU, memory, InfiniBand, and storage periodically to ensure optimal performance and identify tuning opportunities across hardware, driver, and application layers.
- Enforce security best practices including node hardening, kernel patching, and compliance across all systems.
- Manage parallel file systems such as Lustre, GPFS, Weka, or Vast, including performance tuning and capacity planning.
- Directly support research activities in computational science, engineering, data analysis, and AI/ML by working closely with faculty, researchers, collaboration partners, and industrial partners in collaboration with application support teams.
- Develop software tools and utilities as needed to support research projects on cluster systems and subsystems.
- Drive proof-of-concept projects and technology evaluations end-to-end and research industry best practices and advocate system enhancements.
- Coordinate with vendors and third-party service providers to report and resolve issues in a timely manner.
- Develop and maintain user documentation, standard operating procedures, and training materials in the internal wiki.
- Stay at the forefront of HPC advancements through continuous learning, industry conferences, and professional collaboration, while driving benchmarking initiatives to inform future hardware procurement.
Competencies
- Expertise in supporting users of computational science and engineering, data analysis, and artificial intelligence applications and libraries in different HPC environments.
- Strong expertise in Linux system administration (RHEL, Rocky Linux, or CentOS) in large-scale HPC environments.
- Proficiency with HPC applications and programming models (Fortran, C/C++, Python, MPI, OpenMP, CUDA, OpenACC).
- Demonstrated track record of managing complex HPC systems, including parallel file systems, job schedulers, InfiniBand/Ethernet networks, and monitoring systems.
- Experience with configuration management tools (Ansible, Puppet, or equivalent).
- Familiarity with computational science, data analysis, and AI/ML applications and libraries used in HPC environments.
- Knowledge of project management principles and practices.
- Demonstrated ability to support research activities in a highly collaborative HPC environment.
- Strong analytical, problem-solving, and decision-making skills.
- Proactively identifies and implements system improvements; takes initiative and sees tasks through to closure.
- Ability to manage multiple concurrent projects and deliver high-quality results within deadlines.
- Proven ability to collaborate cross-functionally with researchers, application teams, and vendors.
- Effective in multi-cultural, international work environments.
- Excellent verbal and written communication skills in English, including the ability to prepare and deliver technical reports and presentations.
Qualifications
Education requirement, minimum:
Bachelor’s or master’s degree in computer science/engineering, Information Systems, or equivalent
Experience
Experience requirement, minimum:
- Five years of experience supporting large scale computing platforms and related subsystems.
- Experience troubleshooting complex hardware issues and documenting root cause analysis.
- Experience managing parallel storage systems (Lustre, GPFS, Weka, Vast, or similar).
- Experience benchmarking HPC system components (CPU, memory, InfiniBand, storage).
- Experience administering workload managers/schedulers (Slurm, LSF, or PBS).
- Strong Linux system administration experience (RHEL, Rocky Linux, or CentOS).
- Experience with configuration management tools such as Ansible or Puppet.
- Ability to coordinate with researchers, application support teams, and vendors to resolve complex issues and drive them to closure.
- Proven ability to collaborate cross-functionally and drive initiatives to completion.
- Familiarity with Kubernetes and container orchestration platforms would be desirable