Data engineer

İşin təsviri

Job description:

  • Designs and implements the data pipelines and transformations necessary for our Data Sharing Platform
  • Ensures quality and accuracy of data used by performing data quality measurement and analysis
  • Works closely with Data Scientists, architects, and engineers to ensure that we produce high-quality data solutions
  • Maintains high quality of our data pipelines in production, ensuring data quality and performance
  • Suggest improvements, new tools, approaches to enhance and expand data platform’s capabilities and performance
  • Implement strategies, standards, and best practices for data ingestion and integration
  • Analyze new sources of data to quantify quality, uniqueness, value, and overlap with existing data sources
  • Participate in the platform governance process improvement
  • Stays current with rapidly developing data technologies and tools. Shares knowledge with others

Experience, Competencies and Skills Required:

  • Bachelor’s degree in Computer science, Engineering, Data analysis
  • Minimum 3 years of experience in operations;
  • Experience with data integration (ETL/ELT) concepts, demonstratable skills of implementing data pipelines
  • Experience with orchestration tools (Airflow, Dagster, etc.)
  • Experience with SQL and at least one programming language (Python);
  • Knowledge of good engineering practices around data modelling (Star, Snowflake, Data Vault, etc), data access and code writing
  • Good knowledge of DataBase administration;
  • Understanding of containers and Kubernetes
  • Good grasp of data pipelines monitoring
  • Ability to write, debug, unit test, and performance test data integration processes
  • Ablility to clearly define data quality issues
  • Strong problem solving/critical thinking skills
  • At least Intermediate English is a must, spoken Russian is a plus.
  • Desire to work with DataOps practices and methodologies in a highly collaborative environment

How to apply:

Interested candidates are requested to submit:

  • CV to e-mail;
  • Put “Data engineer” in the subject line;
  • CVs should be sent by May 13, 2024.

Attention: The candidates will go through initial CV screening review. Those candidates ONLY who succeeds based on CV screening will be contacted via email and/or phone and will be invited to interview.

 

İşin təsviri:

  • Data Mübadiləsi Platforması üçün lazım olan data konveyerlərin və transformasiyaların layihələndirilməsi və tətbiq edilməsi;
  • Data keyfiyyətinin ölçülməsi və təhlilini aparmaqla istifadə edilmiş datanın keyfiyyətinin və dəqiqliyinin təmin edilməsi;
  • Data mütəxəssisləri, arxitektorlar və mühəndislər ilə sıx işləyərək yüksək keyfiyyətli data həlləri hazırlanmasının təmin edilməsi;
  • Data keyfiyyətini və performansını təmin etməklə hazırlanan data konveyerlərin yüksək keyfiyyətinin qorunub saxlanması;
  • Datanın qəbulu və inteqrasiyası üçün strategiyalar, standartlar və qabaqcıl təcrübələrin tətbiq edilməsi;
  • Kəmiyyəti, unikallığı, dəyəri və mövcud data mənbələri ilə üst-üstə düşmə potensialını ölçmək üçün yeni data mənbələrinin təhlil edilməsi;
  • Platformada idarəetmə prosesinin təkmilləşdirilməsində iştirak edilməsi;
  • Sürətlə inkişaf edən data texnologiyaları və alətləri barədə ən son yeniliklərdən xəbərdar olması, biliklərinin digərləri ilə bölüşülməsi;

Tələb olunan Təhsil, Təcrübə və Bacarıqlar:

  • Kompüter elmləri, mühəndislik, data analitikası üzrə bakalavr dərəcəsi;
  • Əməliyyatlarda minimum 3 il təcrüə;
  • Data inteqrasiyası (ETL/ELT) konsepsiyaları ilə işləmə təcrübəsi, data konveyerlərinin tətbiqi üzrə nümayiş edilə bilən bacarıqlar
  • Orkestrləşdirmə alətləri ilə təcrübə (Airflow, Dagster və s.)
  • SQL və ən azı bir proqramlaşdırma dili (Python) ilə iş təcrübəsi;
  • Məlumatların modelləşdirilməsi (Star, Snowflake, Data Vault və s.), dataya giriş və kod yazılması üzrə qabaqcıl mühəndislik təcrübələri haqqında biliklər
  • DataBase idarə edilməsi barədə yaxşı biliklər;
  • Konteynerlər və Kubernetes haqqında anlayış
  • Data konveyerlərinin monitorinqini yaxşı başa düşmək
  • Datanın inteqrasiyası prosesləri üzrə yazmaq, xətaları aradan qaldırmaq (debug), vahid testi və funksional test aparmaq bacarıqları 
  • Datanın keyfiyyəti məsələlərini aydın şəkildə müəyyən etmək bacarığı
  • Güclü problem həll etmə/tənqidi düşünmə bacarığı
  • Ən azı orta səviyyədə ingilis dili bilmək mütləqdir, rus dilində danışıq bacarığı üstünlükdür.
  • Yüksək əməkdaşlıq mühitində DataOps təcrübələri və metodologiyaları ilə işləmək həvəsi

Müraciət etmə qaydaları: 

Maraqlanan namizədlərdən aşağıda göstərilən qaydada müraciət etmək xahiş olunur:

  • CV e-mail ünvanına göndərilməlidir;
  • Mövzu sətrində “Data mühəndisi” qeyd olunmalıdır;
  • CV-lər 13 may 2024-cü il tarixinə qədər göndərilməlidir.

Diqqət: Müraciət edən namizədlərin CV-ləri seçim üçün ilkin baxışdan keçiriləcəkdir. İlkin CV seçimi zamanı qeyd edilən tələblərə uyğun namizədlər ilə e-poçt və / və ya telefon vasitəsilə əlaqə saxlanılacaq.

İşəgötürənin reytinqi