مهندس بيانات وبنية تحتية أول

المسؤوليات

• تصميم وتطوير ونشر وصيانة حلول بيانات قابلة للتوسع ومفتوحة المصدر تدعم أعمالنا الدولية سريعة النمو.
• بناء وتطوير بنية البيانات لدينا لتمكين التحليلات المتقدمة وإعداد التقارير واتخاذ القرارات المستندة إلى البيانات عبر المؤسسة.
• تطوير وتحسين خطوط أنابيب CDC / ETL / ELT للمعالجة المجمعة وفي الوقت الفعلي تقريبًا.
• دعم سير عمل التحليلات والتعلم الآلي من خلال توفير مجموعات بيانات موثوقة ومنظمة جيدًا.
• دمج البيانات من مجموعة واسعة من المصادر، بما في ذلك قواعد البيانات المعاملاتية والمنصات الخارجية وواجهات برمجة التطبيقات الخارجية (مثل PostgreSQL وMySQL وGoogle Analytics وBigQuery وGoogle Ads وAdjust وغيرها).
• التعاون الوثيق مع مهندسي البيانات والمحللين وعلماء البيانات وأصحاب المصلحة في الأعمال لضمان جودة البيانات والاتساق ومعايير الحوكمة.
• مراقبة واستكشاف الأخطاء وإصلاحها وتحسين أداء منصة البيانات وموثوقيتها وقابلية التوسع باستخدام حلول مُدارة ومفتوحة المصدر.
• تقييم والتوصية بتقنيات وأدوات وأساليب معمارية جديدة (مفتوحة المصدر / مُدارة) لتعزيز نظام البيانات لدينا.
• المساهمة في التوثيق الفني وتبادل المعرفة وأفضل الممارسات داخل فريق البيانات والمؤسسة الأوسع.

المتطلبات

• 4+ سنوات من الخبرة المهنية في هندسة البيانات أو مستودعات البيانات أو عمليات البيانات أو مجال ذي صلة.
• خبرة عملية جيدة في أحد السحابات الرئيسية. يفضل AWS.
• خبرة عملية خبيرة مطلوبة في أدوات لينكس.
• يجب أن تكون قادرًا على نشر التطبيقات باستخدام Docker على خوادم معدنية.
• درجة البكالوريوس أو أعلى في علوم الكمبيوتر أو الرياضيات أو الفيزياء أو الهندسة أو الاقتصاد أو أي تخصص كمي آخر.
• خبرة قوية في SQL وPSQL ومفاهيم قواعد البيانات العلائقية، بما في ذلك نمذجة البيانات وتحسين الاستعلامات.
• خبرة في تصميم وصيانة بنى مستودعات البيانات.
• خبرة عملية مع قواعد البيانات العمودية وتقنيات تحسين الأداء.
• خبرة في العمل مع أدوات تنسيق سير العمل وجدولة الوظائف الموزعة، ويفضل Apache Airflow.
• مهارات برمجة قوية في Python أو Java، مع تفضيل Python.
• فهم جيد لبيئات لينكس والبرمجة النصية (Bash).
• خبرة مع منصات البيانات السحابية الحديثة وقواعد البيانات التحليلية مثل ClickHouse أو StarRocks أو تقنيات مشابهة.
• خبرة في العمل مع حلول مفتوحة المصدر متوافقة مع S3 وحلول مُدارة.
• الإلمام بتكامل البيانات وأطر CDC / ETL / ELT ومعالجة البيانات على نطاق واسع.
• مهارات تواصل قوية باللغة الإنجليزية.

المهارات المطلوبة