Lead Data Engineer (Python, Azure)

W Scalo czeka na Ciebie:

• prowadzenie i rozwój pipeline’ów danych w środowisku Azure (Databricks, Data Lake, Data Factory, DBT, PySpark),
• projektowanie architektury danych i optymalizacja przetwarzania danych (batch & real-time),
• współpraca z zespołem analityków, data scientistów oraz inżynierami platformowymi,
• zapewnienie jakości danych, dokumentowanie linii danych i wdrażanie testów,
• utrzymanie bezpieczeństwa danych (RBAC, szyfrowanie, compliance),
• udział w projektowaniu i wdrażaniu rozwiązań ML z wykorzystaniem danych produkcyjnych,
• mentoring młodszych inżynierów i prowadzenie spotkań technicznych,
• wdrażanie najlepszych praktyk DevOps i CI/CD (monitoring, automatyzacja, konteneryzacja),
• tworzenie dokumentacji technicznej i wspieranie onboardingu nowych członków zespołu,
• proaktywne identyfikowanie możliwości optymalizacji i usprawnień technologicznych,
• projekt 100% zdalny,
• stawka do 190 PLN/h przy B2B.

Co dla Ciebie mamy:

• długofalową współpracę - różnorodne projekty (działamy w ramach Software Services, Embedded Services, Data Services, Cloud Services), 
• możliwość rozwoju kompetencji we współpracy z naszym Center of Excellence,  
• kafeteryjny system benefitów – Motivizer, 
• prywatną opiekę medyczną – Luxmed.

Ta oferta jest dla Ciebie, jeśli:

• masz minimum 5 lat doświadczenia jako Data Engineer lub Tech Lead w projektach komercyjnych,
• swobodnie poruszasz się w Pythonie, SQL i PySpark – kodowanie to Twoja codzienność,
• znasz i wykorzystujesz na co dzień rozwiązania Azure: Databricks, Data Lake, Data Factory,
• projektujesz skalowalne pipeline’y danych i znasz dobre praktyki modelowania danych (3NF, Data Vault, Dimensional),
• pracujesz z DBT, znasz Delta Lake, Parquet i potrafisz zadbać o optymalną strukturę danych,
• wdrażasz podejście DevOps: piszesz testy, automatyzujesz CI/CD i dbasz o monitoring,
• umiesz zapewnić bezpieczeństwo danych (RBAC, szyfrowanie, zgodność z regulacjami),
• masz doświadczenie w roli lidera technicznego – potrafisz prowadzić zespół i dzielić się wiedzą,
• dobrze czujesz się w środowisku Agile/Scrum i blisko współpracujesz z Product Ownerem,
• potrafisz jasno komunikować się po angielsku (w mowie i piśmie), również z biznesem - B2/C1 level,
• jesteś osobą samodzielną, proaktywną, nastawioną na jakość i ciągłe doskonalenie.

Mile widziane:

• znajomość Dockera oraz frameworków webowych: Flask, Streamlit lub Dash,
• doświadczenie w pracy z Azure DevOps oraz monitoringiem (Azure Monitor, Log Analytics),
• znajomość narzędzi IaC – Terraform lub ARM Templates,
• doświadczenie z integracją rozwiązań z Azure Active Directory,
• umiejętność tworzenia lekkich aplikacji wizualizujących dane lub wspierających procesy ML.