Senior Azure Data Engineer

• Kontrakt B2B za pośrednictwem Devire
• Praca zdalna
• Elastyczne godziny pracy
• Możliwość skorzystania z dodatkowych benefitów – karta sportowa, prywatna opieka medyczna, ubezpieczenie na życie.

• Minimum 8 lat doświadczenia zawodowego w Data Engineering, w tym odpowiedzialność za produkcyjne potoki danych.

• Bardzo dobre, praktyczne doświadczenie z Microsoft Azure.

• Bardzo dobre, praktyczne doświadczenie z Databricks.

• Zaawansowana znajomość Pythona.

• Zaawansowana znajomość SQL.

• Duże doświadczenie w projektowaniu, budowaniu, wdrażaniu i utrzymywaniu potoków danych oraz analitycznych produktów danych.

• Dobra znajomość zasad nowoczesnych platform danych oraz architektury Lakehouse.

• Doświadczenie z Medallion Architecture.

• Doświadczenie w modelowaniu wymiarowym (dimensional modelling) na potrzeby raportowania i analityki.

• Bardzo dobre umiejętności w zakresie modelowania danych.

• Doświadczenie z DataOps oraz praktykami inżynierii oprogramowania, w tym:

  • kontrolą wersji (version control),

  • automatycznym testowaniem,

  • CI/CD,

  • wdrażaniem,

  • monitoringiem,

  • zarządzaniem incydentami.

• Doświadczenie w stosowaniu praktyk SRE oraz w ciągłym doskonaleniu procesów operacyjnych.

• Umiejętność zrozumienia różnych domen danych oraz celów biznesowych przed podjęciem decyzji dotyczących architektury i rozwoju.

• Bardzo dobre umiejętności komunikacyjne oraz w zakresie zarządzania interesariuszami (stakeholder management).

• Doświadczenie we współpracy pomiędzy zespołami Data, Architecture, Product i Engineering.

• Umiejętność samodzielnej pracy, przejmowania odpowiedzialności, podejmowania decyzji technicznych oraz ich jasnego dokumentowania.

Dodatkowym atutem będzie

• Doświadczenie z Databricks Unity Catalog.

• Doświadczenie w zakresie zarządzania danymi (data governance), śledzenia pochodzenia danych (data lineage) oraz kontroli dostępu w Databricks.

• Doświadczenie w pracy z danymi dotyczącymi płatności lub transakcji.

• Doświadczenie w pracy w rozproszonych, międzynarodowych zespołach.

Obowiązki

• Projektowanie, budowanie, testowanie i wdrażanie skalowalnych potoków danych (data pipelines) na potrzeby raportowania i analityki.

• Budowanie nowych, gotowych do pracy produkcyjnej potoków danych wspierających priorytetowe wymagania raportowe.

• Przeglądanie, refaktoryzacja i stabilizowanie istniejących potoków raportowych.

• Utrzymywanie nowych i istniejących potoków w celu zapewnienia niezawodnego, codziennego dostarczania danych.

• Zwiększanie niezawodności, wydajności, łatwości utrzymania oraz obserwowalności (observability) potoków danych.

• Wspieranie procesu wdrażania obciążeń danych Core Products na platformę Group Data Platform.

• Zapewnienie zgodności potoków ze standardami Group Data Platform obejmującymi architekturę, zarządzanie danymi (governance), bezpieczeństwo, modelowanie danych, jakość kodu, testowanie, CI/CD, monitoring oraz dokumentację.

• Współpraca z interesariuszami z obszarów Data, Architecture, Product i Engineering w celu przekładania wymagań dotyczących raportowania na solidne rozwiązania techniczne.

• Odpowiedzialność za praktyki SRE (Site Reliability Engineering) dotyczące potoków danych i produktów danych.

• Diagnozowanie incydentów związanych z danymi oraz awarii potoków, przeprowadzanie analizy przyczyn źródłowych (root-cause analysis) oraz wdrażanie długoterminowych działań naprawczych.

• Dokumentowanie przepływów danych, zależności, logiki transformacji, decyzji architektonicznych oraz procedur operacyjnych.

• Dzielenie się wiedzą inżynierską i dobrymi praktykami z zespołem Core Products Data w celu wspierania jego długoterminowej niezależności.