Databricks Engineer
⚲ Warszawa
20 000–24 000 zł netto (+ VAT) / mies.
Wymagania
- min. 4 lata doświadczenia w data engineeringu lub podobnej roli
- min. 2 lata praktycznego doświadczenia z Databricks w środowisku produkcyjnym
- dogłębna znajomość Apache Spark i koncepcji przetwarzania rozproszonego
- praktyczne doświadczenie z ekosystemem Microsoft Azure
- język angielski i polski (wymagane oba)
Mile widziane
- Hive lub Impala
- pipeline'y ML i CI/CD dla obciążeń danych
- doświadczenie w dużych środowiskach enterprise
Opis stanowiska
Mid/Senior Databricks Engineer w Mindbox przy projektowaniu i budowie rozwiązań przetwarzania danych w Azure Databricks. Realnie: tworzenie pipeline'ów w Pythonie i SQL, praca z Apache Spark, optymalizacja zadań i integracja z Data Lake. Szczera uwaga: opis sugeruje samodzielne projektowanie rozwiązań od podstaw oraz optymalizację istniejących zadań Spark — możesz trafić na pracę naprawiania wydajności. Szczegóły projektu poznasz dopiero na rozmowie. Praca hybrydowa: 1-2 dni w tygodniu w biurze w Warszawie.
🔍 Dekoder Ogłoszenia
🔴
design and develop scalable data processing and integration solutions
Oczekuje się, że będziesz samodzielnie projektować i tworzyć rozwiązania od podstaw, a nie tylko implementować istniejące.
🟡
advanced data solutions on Azure Databricks
Może oznaczać zarówno skomplikowane technicznie rozwiązania, jak i po prostu wykorzystanie zaawansowanych funkcji platformy Databricks.
🔴
Optimize Spark jobs, queries, and workflows for performance
Może oznaczać, że obecne rozwiązania nie działają optymalnie i będziesz musiał naprawiać problemy wydajnościowe.
🟡
cooperate with data & analytics teams
Może oznaczać, że będziesz musiał dużo czasu poświęcać na komunikację i uzgadnianie wymagań z innymi zespołami.
🔴
Detailed project information will be shared during the recruitment
Obecnie nie ma jasnych informacji o konkretnym projekcie, co może oznaczać niepewność co do jego charakteru.