İşin təsviri
Job description:
- Designs and implements the data pipelines and transformations necessary for our Data Sharing Platform
- Ensures quality and accuracy of data used by performing data quality measurement and analysis
- Works closely with Data Scientists, architects, and engineers to ensure that we produce high-quality data solutions
- Maintains high quality of our data pipelines in production, ensuring data quality and performance
- Suggest improvements, new tools, approaches to enhance and expand data platform’s capabilities and performance
- Implement strategies, standards, and best practices for data ingestion and integration
- Analyze new sources of data to quantify quality, uniqueness, value, and overlap with existing data sources
- Participate in the platform governance process improvement
- Stays current with rapidly developing data technologies and tools. Shares knowledge with others
Experience, Competencies and Skills Required:
- Bachelor’s degree in Computer science, Engineering, Data analysis
- Minimum 3 years of experience in operations;
- Experience with data integration (ETL/ELT) concepts, demonstratable skills of implementing data pipelines
- Experience with orchestration tools (Airflow, Dagster, etc.)
- Experience with SQL and at least one programming language (Python);
- Knowledge of good engineering practices around data modelling (Star, Snowflake, Data Vault, etc), data access and code writing
- Good knowledge of DataBase administration;
- Understanding of containers and Kubernetes
- Good grasp of data pipelines monitoring
- Ability to write, debug, unit test, and performance test data integration processes
- Ablility to clearly define data quality issues
- Strong problem solving/critical thinking skills
- At least Intermediate English is a must, spoken Russian is a plus.
- Desire to work with DataOps practices and methodologies in a highly collaborative environment
How to apply:
Interested candidates are requested to submit:
- CV to e-mail;
- Put “Data engineer” in the subject line;
- CVs should be sent by May 13, 2024.
Attention: The candidates will go through initial CV screening review. Those candidates ONLY who succeeds based on CV screening will be contacted via email and/or phone and will be invited to interview.
İşin təsviri:
- Data Mübadiləsi Platforması üçün lazım olan data konveyerlərin və transformasiyaların layihələndirilməsi və tətbiq edilməsi;
- Data keyfiyyətinin ölçülməsi və təhlilini aparmaqla istifadə edilmiş datanın keyfiyyətinin və dəqiqliyinin təmin edilməsi;
- Data mütəxəssisləri, arxitektorlar və mühəndislər ilə sıx işləyərək yüksək keyfiyyətli data həlləri hazırlanmasının təmin edilməsi;
- Data keyfiyyətini və performansını təmin etməklə hazırlanan data konveyerlərin yüksək keyfiyyətinin qorunub saxlanması;
- Datanın qəbulu və inteqrasiyası üçün strategiyalar, standartlar və qabaqcıl təcrübələrin tətbiq edilməsi;
- Kəmiyyəti, unikallığı, dəyəri və mövcud data mənbələri ilə üst-üstə düşmə potensialını ölçmək üçün yeni data mənbələrinin təhlil edilməsi;
- Platformada idarəetmə prosesinin təkmilləşdirilməsində iştirak edilməsi;
- Sürətlə inkişaf edən data texnologiyaları və alətləri barədə ən son yeniliklərdən xəbərdar olması, biliklərinin digərləri ilə bölüşülməsi;
Tələb olunan Təhsil, Təcrübə və Bacarıqlar:
- Kompüter elmləri, mühəndislik, data analitikası üzrə bakalavr dərəcəsi;
- Əməliyyatlarda minimum 3 il təcrüə;
- Data inteqrasiyası (ETL/ELT) konsepsiyaları ilə işləmə təcrübəsi, data konveyerlərinin tətbiqi üzrə nümayiş edilə bilən bacarıqlar
- Orkestrləşdirmə alətləri ilə təcrübə (Airflow, Dagster və s.)
- SQL və ən azı bir proqramlaşdırma dili (Python) ilə iş təcrübəsi;
- Məlumatların modelləşdirilməsi (Star, Snowflake, Data Vault və s.), dataya giriş və kod yazılması üzrə qabaqcıl mühəndislik təcrübələri haqqında biliklər
- DataBase idarə edilməsi barədə yaxşı biliklər;
- Konteynerlər və Kubernetes haqqında anlayış
- Data konveyerlərinin monitorinqini yaxşı başa düşmək
- Datanın inteqrasiyası prosesləri üzrə yazmaq, xətaları aradan qaldırmaq (debug), vahid testi və funksional test aparmaq bacarıqları
- Datanın keyfiyyəti məsələlərini aydın şəkildə müəyyən etmək bacarığı
- Güclü problem həll etmə/tənqidi düşünmə bacarığı
- Ən azı orta səviyyədə ingilis dili bilmək mütləqdir, rus dilində danışıq bacarığı üstünlükdür.
- Yüksək əməkdaşlıq mühitində DataOps təcrübələri və metodologiyaları ilə işləmək həvəsi
Müraciət etmə qaydaları:
Maraqlanan namizədlərdən aşağıda göstərilən qaydada müraciət etmək xahiş olunur:
- CV e-mail ünvanına göndərilməlidir;
- Mövzu sətrində “Data mühəndisi” qeyd olunmalıdır;
- CV-lər 13 may 2024-cü il tarixinə qədər göndərilməlidir.
Diqqət: Müraciət edən namizədlərin CV-ləri seçim üçün ilkin baxışdan keçiriləcəkdir. İlkin CV seçimi zamanı qeyd edilən tələblərə uyğun namizədlər ilə e-poçt və / və ya telefon vasitəsilə əlaqə saxlanılacaq.