Do naszego zespołu technologicznego poszukujemy Data Engineera, który pomoże nam tworzyć i rozwijać skalowalne oraz wydajne rozwiązania oparte na danych. Szukamy osoby samodzielnej, technicznie sprawnej i gotowej do przejmowania pełnej odpowiedzialności za rozwijane systemy – od koncepcji po wdrożenie.
Twój zakres obowiązków:
- projektowanie i zarządzanie przepływami danych oraz tworzenie zbiorów danych,
- budowa i utrzymanie procesów ETL z wykorzystaniem Dagster (mile widziane doświadczenie w Apache Airflow),
- modelowanie danych i automatyzacja procesów przy użyciu Pythona oraz bibliotek Pandas / Polars (mile widziane PySpark / Spark),
- tworzenie i rozwój hurtowni danych (m.in. SQL Server, ClickHouse, mile widziane Cosmos DB),
- integracja danych z chmury Azure (m.in. ADLS, Azure Event Hub; mile widziana znajomość Kafka),
- przygotowywanie raportów i stosowanie dobrych praktyk w pracy z danymi.
Nasze oczekiwania:
- minimum 3 lata doświadczenia na stanowisku Data Engineer lub w podobnej roli,
- bardzo dobra znajomość Pythona i umiejętność pisania czystego, efektywnego kodu,
- praktyczne doświadczenie w SQL oraz w pracy z relacyjnymi i nierelacyjnymi bazami danych,
- znajomość procesów budowy hurtowni danych i projektowania modeli danych,
- doświadczenie w pracy z narzędziami do orkiestracji i przetwarzania danych (Dagster, Airflow lub inne),
- gotowość do podjęcia projektu na okres 3-4 miesięcy.
Mile widziane:
- doświadczenie w pracy ze zbiorami danych marketingowych (Google Ads, Meta Ads),
- znajomość rozwiązań big data (Spark, Kafka),
- praktyczna wiedza o dodatkowych narzędziach i usługach chmurowych w ekosystemie Azure.
Stackmine
100
W Stackmine zajmujemy się pełnym cyklem tworzenia rozwiązań IT z obszarów aplikacji webowych, desktop oraz mobile. Realizacja projektów obejmuje wiodące technologie służące do wytwarzania oprogramowania w obszarze back-end (JAVA, C#, Python, C++, Node.js, Scala, PHP,) oraz front-end (Angular, React, Vue). Dodatkowo posiadamy doświadczenie w budowaniu zespołów z niszowymi kompetencjami np. Golang. Ponadto oferujemy szerokie doświadczenie sektorowe, co pozwala nam z sukcesem realizować projekty dla branż wymagających domenowej wiedzy.