يهدف الدور إلى ضمان امتلاك المؤسسة بيانات موثوقة ومحكومة وجاهزة للتحليلات، من خلال بناء خطوط أنابيب ونماذج بيانات متينة وصيانتها. كما يركز على إتاحة البيانات الموثوقة بصورة آمنة وفعالة من حيث التكلفة لدعم التقارير المؤسسية وذكاء الأعمال واتخاذ القرارات المعتمد على البيانات.
وصف الوظيفة
المسؤوليات الرئيسية
1- استيعاب البيانات المؤسسية وهندسة البيانات
- بناء عمليات ربط وتدفقات مهام قابلة لإعادة الاستخدام ومعتمدة على المعلمات في Informatica IDMC لتوحيد استيعاب البيانات.
- تطبيق التقاط تغييرات البيانات (CDC)، وعمليات التحميل المتكررة الآمنة، وتطور المخططات، وبوابات جودة البيانات.
- تحسين عمليات التحميل إلى BigQuery باستخدام التقسيم والتجميع واختيار النهج المناسب بين التحميل والبث.
- إعداد إدارة الإصدارات وخطوط التكامل والنشر المستمر (CI/CD) لأصول هندسة البيانات.
2- تصميم خرائط البيانات والتحويلات
- تحليل الأنظمة المصدر وتحديد خرائط الحقول على مستوى الحقل وقواعد التحويل.
- تحديد منطق الأعمال، بما في ذلك عمليات الربط وعمليات البحث والاشتقاقات.
- تعريف قواعد جودة البيانات ومعالجة الاستثناءات ومعايير رفض البيانات.
3- التنسيق والأتمتة وهندسة الموثوقية
- تحديد معلمات تدفقات المهام وإعداد الجداول الزمنية والاعتماديات.
- تطبيق إعادة المحاولة والتراجع التدريجي ونقاط التحقق لضمان موثوقية المعالجة.
- دمج المراقبة والتنبيهات من خلال وحدة تحكم العمليات وChatOps.
4- أدوار البيانات وإدارة الخصوصية
- تعريف أدوار إدارة الهوية والوصول (IAM) وحسابات الخدمة وفق مبدأ أقل قدر من الصلاحيات للوصول إلى البيانات.
- تطبيق أمن مجموعات البيانات والجداول والصفوف والأعمدة، إلى جانب إخفاء البيانات.
- تفعيل سجلات التدقيق وسياسات الاحتفاظ، وتصنيف بيانات المعلومات الصحية المحمية (PHI) ومعلومات التعريف الشخصية (PII).
5- هندسة البيانات الحديثة ونمذجة البيانات
- تطبيق بنية Medallion عبر طبقات Bronze وSilver وGold.
- تطوير نماذج بيانات قابلة للتوسع ومنسقة لتلبية احتياجات التحليلات وإعداد التقارير.
- تحديد معايير جودة البيانات وتسلسلها ونماذج حوكمتها للبيانات المنسقة.
- التعاون مع فرق الأعمال والتحليلات لإنشاء مجموعات بيانات موثوقة.
6- مراقبة أعباء العمل والأداء وتحسين التكلفة
- تتبع حداثة البيانات وصحة المهام والأحجام وحالات الشذوذ.
- مراقبة اتفاقيات مستوى الخدمة فيما يتعلق بمدة المهام والأخطاء والتكلفة لكل تيرابايت واستخدام الخانات (Slots).
- ضبط أداء BigQuery من خلال تحسين الاستعلامات وإدارة الموارد.
- تحسين التكلفة عبر إدارة دورة حياة التخزين وضبط الاستعلامات والتخزين المؤقت.
المهارات
- أدوات هندسة البيانات: Informatica IDMC وAirflow وApache Spark.
- لغات البرمجة: SQL وPython.
- تقنيات السحابة: Google Cloud Platform، بما في ذلك BigQuery وIAM، مع Azure أو AWS كخيار إضافي.
- منصات التصور وذكاء الأعمال: Power BI وLooker وLooker Studio وTableau.
- إجادة BigQuery، بما يشمل SQL والنمذجة والضبط.
- إتقان Informatica IDMC/IICS في عمليات ETL/ELT.
- خبرة في خطوط أنابيب البيانات المؤسسية المتكاملة من البداية إلى النهاية باستخدام GCP وInformatica IDMC.
- معرفة ببنية Medallion.
- خبرة في بناء مخازن بيانات مخصصة ومجموعات بيانات جاهزة لإعداد التقارير.
- تُعد الخبرة في دعم لوحات معلومات ذكاء الأعمال المؤسسية والتحليلات ذاتية الخدمة ميزة إضافية.
- معرفة ببيانات الرعاية الصحية، مثل المطالبات ومقدمي الخدمة والأعضاء.
- فهم أمن السحابة، بما في ذلك IAM وحسابات الخدمة ونقاط النهاية الخاصة.
التعليم
درجة البكالوريوس في علوم الحاسب أو تقنية المعلومات أو نظم المعلومات أو تخصص ذي صلة.
