Big Data Developer (Spark)

Poszukujemy bystrych, zmotywowanych i chętnych do współpracy ludzi, którzy dołączą do naszego zespołu i będą się razem z nami rozwijać w obszarze Data Lake i Big Data. 
Razem z naszym klientem, dużą międzynarodową firmą z branży finansowej, budujemy nowoczesną platformę danych opartą o mikroserwisy w środowisku chmury AWS. Dane są przetwarzane za pomocą narzędzia Databricks, a cały projekt jest realizowany w zespołach scrumowych. Inżynierowie danych tworzą rozwiązania, które umożliwiają specjalistom ds. inwestycji bezproblemowe wydobywanie spostrzeżeń z dużych, złożonych, ustrukturyzowanych i nieustrukturyzowanych zestawów danych. 

Z nami będziesz:

• Rozwiązywać rzeczywiste wyzwania biznesowe poprzez wdrażanie i optymalizacje procesów przetwarzania danych Big Data w Data Lake 
• Pracować z najnowszymi technologiami opartymi o rozwiązania Spark, DataBricks, AWS 
• Analizować procesy przetwarzania danych strumieniowych i batch`owych 
• Współpracować z zespołem Onwelo oraz klienta i wspierać go w kluczowych etapach projektu 
• Diagnozować i rozwiązywać napotkane problemy 

Czekamy na Ciebie, jeśli:

• Posiadasz ponad 3 lata doświadczenia w przetwarzaniu danych i optymalizacji procesów w Spark. 
• Posiadasz doświadczenie w inżynierii danych lub pokrewnej pracy programistycznej z rozproszoną technologią danych 
• Masz doświadczenie w programowaniu w databricks w Pythonie i SQL 
• Znasz platformę AWS oraz jej kluczowe serwisy