مهندس بيانات أول - Dubai, United Arab Emirates - Presight

Description

حل المشكلات الصعبة باستخدام مهارات البرمجةبلغة بايثون.
تصميم وبناء وإطلاق عمليات جديدة لاستخراجالبيانات وتحويلها وتحميلها في الإنتاج.
الزحف على الويب،وتنظيف البيانات، وتعليق البيانات، واستيعاب البيانات، ومعالجةالبيانات.
قراءة ومقارنة مجموعات البياناتالمعقدة.
إنشاء وصيانة خطوط أنابيبالبيانات.
التركيز المستمر على تحسين العملية لزيادةالكفاءة والإنتاجية داخل الفريق.
استخدام Python وSQL وESوShell وما إلى ذلك لبناء البنية التحتية المطلوبة لاستخراج البياناتوتحويلها وتحميلها على النحو الأمثل.
تقديم رؤى حول مقاييسأداء الأعمال الرئيسية من خلال بناء أدوات تحليلية تستخدم خط أنابيبالبيانات.
دعم الأعمال الأوسع باحتياجاتهم من البيانات علىأساس مخصص.

مؤهلات

للتأهل، يجبأن يكون لديك
أكثر من 3 سنوات من الخبرة فيالبرمجة ومهارات ترميز قوية في Python وShell وJava
درجةالبكالوريوس في هندسة الكمبيوتر أو علوم الكمبيوتر أو الهندسةالكهربائية وعلوم الكمبيوتر.
قدرة مؤسسية جيدة، ومهاراتتواصل جيدة.
خبرة في الزحف على الويبوالتنظيف.
خبرة في هندسة الحلول، واستيعاب البيانات، وتحسينالاستعلام، وفصل البيانات، وETL، وELT، وAWS، وEC2، وS3، وSQS،وlamda، وElastic Search، وRedshift، وأطر عمل CI/CD وسيرالعمل.
معرفة عملية بمفاهيم منصات البيانات - بحيرةالبيانات، مستودع البيانات، ETL، معالجة البيانات الضخمة (تصميم ودعمالتنوع/السرعة/الحجم)، بنية المعالجة في الوقت الفعلي لمنصاتالبيانات، جدولة ومراقبة وظائف ETL/ELT
PostgreSQL والبرمجة(يفضل Java وPython)، والكفاءة في فهم البيانات وعلاقات الكياناتوالبيانات المنظمة وغير المنظمة وقواعد بيانات SQLوNoSQL
معرفة أفضل الممارسات في تحسين نظام معالجة البياناتالعمودية والموزعة والبنية التحتية