وظيفة مستشار تقني Cloudera CDP لدى PC Communication & IT Co. في الرياض
تفاصيل الوظيفة
تعلن شركة PC Communication & IT Co. عن توفر وظيفة استشاري تقني متخصص في Cloudera CDP (Cloudera Data Platform) في الرياض.
نبذة عن الوظيفة
نبحث عن استشاري تقني متمرس في إدارة Cloudera CDP يتمتع بخبرة عملية قوية في إدارة وتكوين ومراقبة وتأمين وتحسين بيئات Cloudera Data Platform. يجب أن يكون لدى المرشح المثالي خبرة قوية مع Cloudera Manager وCDP Private Cloud Base وHDFS وYARN وHive وApache NiFi وKerberos وApache Ranger وCloudera Backup and Disaster Recovery (BDR)، مع القدرة على دعم بيئات الإنتاج المؤسسية واستكشاف المشكلات المعقدة في المنصة.
المهام والمسؤوليات
- إدارة Cloudera CDP: تثبيت وتكوين وإدارة وصيانة بيئات Cloudera CDP باستخدام Cloudera Manager وإنشاء وتكوين ونقل وقياس حجم وصيانة مجموعات CDP.
- إدارة خدمات Cloudera ومراقبة صحة المجموعة بشكل عام وتنفيذ أفضل الممارسات الموصى بها من Cloudera لإدارة المجموعات.
- دعم بيئات الإنتاج والتطوير والاختبار الخاصة بـ Cloudera.
- تحسين أداء المجموعة: مراقبة أداء المجموعة واستخدام الموارد والسعة والصحة وتكوين وتحسين قوائم انتظار YARN بناءً على متطلبات العمل.
- إجراء ضبط الأداء عبر HDFS وYARN وHive والخدمات المرتبطة بـ Cloudera وتحسين تكوينات ذاكرة Hive وTez لتحسين أداء الاستعلامات.
- إجراء قياس حجم المجموعة وتخطيط السعة وتحديد اختناقات الأداء وتنفيذ الإجراءات التصحيحية.
- إدارة HDFS وYARN: إدارة ومراقبة تخزين HDFS واستخدام المجموعة وإدارة مساحة HDFS والكتل ولقطات الحالة وأنشطة استعادة البيانات واستكشاف مشكلات التخزين والتوفر.
- تكوين وإدارة قوائم انتظار YARN وتخصيص الموارد ومراقبة وتحسين استخدام موارد YARN.
- تطبيق التوفر العالي (High Availability): تكوين والمحافظة على التوفر العالي لخدمات Cloudera وتنفيذ توفر عالي لـ NameNode والعمل مع ZooKeeper وQuorum Journal Nodes كجزء من تكوينات التوفر العالي.
- ضمان التوفر العالي والموثوقية للخدمات الحيوية لـ Cloudera.
- إدارة أمان Cloudera: تكوين وإدارة أمان Kerberos لبيئات Cloudera وتطبيق Apache Ranger للتحكم في الوصول المستند إلى الأدوار (RBAC) وتكوين سياسات الوصول للمستخدمين والخدمات.
- إدارة مستويات الصلاحية المناسبة للوصول إلى HDFS وخدمات Cloudera الأخرى ودعم متطلبات الأمان والتحكم في الوصول عبر بيئة CDP.
- النسخ الاحتياطي واستعادة الكوارث (BDR): تكوين وإدارة Cloudera Backup and Disaster Recovery وتطبيق استراتيجيات النسخ الاحتياطي والاستعادة لبيئات Cloudera وإجراء اختبارات الاستعادة والتحقق من سلامة النسخ الاحتياطي.
- دعم أنشطة استعادة الكوارث وضمان توفر البيانات.
- المراقبة واستكشاف الأخطاء: مراقبة مجموعات وخدمات Cloudera عبر Cloudera Manager واستكشاف مشكلات المجموعة والخدمة والتخزين والأداء والتوفر.
- تحليل حالات الفشل في النظام وإجراء تحليل السبب الجذري وتحديد المشكلات المتكررة والتوصية بالإجراءات التصحيحية ودعم حل الحوادث ضمن مستويات الخدمة المتفق عليها.
المهارات المطلوبة
- خبرة عملية قوية مع Cloudera CDP.
- خبرة قوية مع Cloudera Manager.
- خبرة مع CDP Private Cloud Base.
- خبرة إدارة قوية مع HDFS وYARN وHive وApache NiFi وZooKeeper.
- خبرة مع Kerberos.
- خبرة مع Apache Ranger وRBAC (التحكم في الوصول المستند إلى الأدوار).
- خبرة مع Cloudera BDR (النسخ الاحتياطي واستعادة الكوارث).
- خبرة في قياس حجم المجموعات وضبط الأداء.
- خبرة في تطبيق التوفر العالي (High Availability).
- مهارات قوية في إدارة Linux واستكشاف الأخطاء.
- مهارات تحليلية قوية ومهارات حل المشكلات.
الشروط والمتطلبات
- درجة البكالوريوس في علوم الحاسب أو تقنية المعلومات أو مجال ذي صلة.
- 8+ سنوات من الخبرة في إدارة Cloudera/Hadoop.
- خبرة قوية في إدارة Cloudera على مستوى المؤسسات.
- خبرة في إدارة بيئات إنتاج Cloudera واسعة النطاق.
- خبرة مع مجموعات Hadoop/Cloudera التي تضم 100+ عقدة (يفضل بشدة).
- شهادة Cloudera (يفضل بشدة).
- الشهادات المفضلة: Cloudera CDP Administrator - Private Cloud Base، HDP Certified Administrator (HDPCA)، Cloudera Technical Expert (CTE)، Cloudera Technical Professional (CTP)، Cloudera Technical Specialist (CTS)، Cloudera Essentials for CDP.
عرض النص الأصلي للإعلان
If interested please share your resume on careers@pcc.net.sa
Job Summary
We are seeking an experienced Cloudera CDP Administrator with strong hands-on expertise in administering, configuring, monitoring, securing, and optimizing Cloudera Data Platform (CDP) environments.
The ideal candidate will have solid experience with Cloudera Manager, CDP Private Cloud Base, HDFS, YARN, Hive, Apache NiFi, Kerberos, Apache Ranger, and Cloudera Backup and Disaster Recovery (BDR), with the ability to support enterprise production environments and troubleshoot complex platform issues.
Key Responsibilities
Cloudera CDP Administration
- Install, configure, administer, and maintain Cloudera CDP environments using Cloudera Manager.
- Perform CDP cluster creation, configuration, migration, sizing, and maintenance.
- Manage Cloudera services and monitor overall cluster health.
- Implement Cloudera-recommended best practices for cluster administration.
- Support production, development, and testing Cloudera environments.
Cluster Performance & Optimization
- Monitor cluster performance, resource utilization, capacity, and health.
- Configure and optimize YARN resource queues based on workload requirements.
- Perform performance tuning across HDFS, YARN, Hive, and associated Cloudera services.
- Optimize Hive and Tez memory configurations to improve query performance.
- Perform cluster sizing and capacity planning.
- Identify performance bottlenecks and implement corrective actions.
HDFS & YARN
- Administer and monitor HDFS storage and cluster utilization.
- Manage HDFS space, blocks, snapshots, and data recovery activities.
- Troubleshoot HDFS storage and availability issues.
- Configure and manage YARN queues and resource allocation.
- Monitor and optimize YARN resource utilization.
High Availability
- Configure and maintain High Availability (HA) for Cloudera services.
- Implement and maintain NameNode HA.
- Work with ZooKeeper and Quorum Journal Nodes as part of HA configurations.
- Ensure high availability and reliability of critical Cloudera services.
Cloudera Security
- Configure and administer Kerberos security for Cloudera environments.
- Implement and manage Apache Ranger for role-based access control (RBAC).
- Configure user and service access policies.
- Manage appropriate privilege levels for access to HDFS and other Cloudera services.
- Support security and access-control requirements across the CDP environment.
Cloudera Backup & Disaster Recovery
- Configure and manage Cloudera Backup and Disaster Recovery (BDR).
- Implement backup and recovery strategies for Cloudera environments.
- Perform recovery testing and validate backup integrity.
- Support disaster recovery activities and ensure data availability.
Monitoring & Troubleshooting
- Monitor Cloudera clusters and services through Cloudera Manager.
- Troubleshoot cluster, service, storage, performance, and availability issues.
- Analyze system failures and perform root-cause analysis.
- Identify recurring issues and recommend corrective actions.
- Support incident resolution within agreed service levels.
Required Skills
- Strong hands-on experience with Cloudera CDP.
- Strong experience with Cloudera Manager.
- Experience with CDP Private Cloud Base.
- Strong administration experience with:
- HDFS
- YARN
- Hive
- Apache NiFi
- ZooKeeper
- Experience with Kerberos.
- Experience with Apache Ranger and RBAC.
- Experience with Cloudera BDR.
- Experience with cluster sizing and performance tuning.
- Experience implementing High Availability.
- Strong Linux administration and troubleshooting skills.
- Strong analytical and problem-solving skills.
Experience & Qualifications
- Bachelor’s degree in Computer Science, Information Technology, or a related field.
- 8+ years of experience in Cloudera/Hadoop administration.
- Strong enterprise-level Cloudera administration experience.
- Experience managing large-scale production Cloudera environments.
- Experience with 100+ node Hadoop/Cloudera clusters is highly desirable.
- Cloudera certification is strongly preferred.
Preferred Certifications
- Cloudera CDP Administrator - Private Cloud Base
- HDP Certified Administrator (HDPCA)
- Cloudera Technical Expert (CTE)
- Cloudera Technical Professional (CTP)
- Cloudera Technical Specialist (CTS)
- Cloudera Essentials for CDP
Key Competencies
- Cloudera CDP Administration
- Cloudera Manager
- Cluster Performance Optimization
- HDFS & YARN Administration
- High Availability
- Kerberos Security
- Apache Ranger
- Backup & Disaster Recovery
- Cluster Monitoring & Troubleshooting
- Capacity Planning
- Root Cause Analysis
- Production Support