Azure Data Engineer with Databricks
⚲ Warszawa
26 880 - 33 600 PLN netto (B2B)
Wymagania
- praktyczne doświadczenie w implementacji rozwiązań z data lake i pipeline'ami (Databricks, Azure Data Factory)
- doświadczenie w projektowaniu i implementacji rozwiązań w chmurze Azure
- biegłość w SQL, PySpark, modelowaniu danych (3NF, schematy star/snowflake) i wzorcach ELT/ETL
- doświadczenie z Pythonem lub podobnymi językami skryptowymi do transformacji, orkiestracji i automatyzacji danych
- znajomość zaawansowanych funkcji Databricks (Unity Catalog, MLflow, Jobs & Pipelines)
- doświadczenie z CI/CD i DevOps dla workflow danych (Git, Azure DevOps)
Mile widziane
- znajomość AWS lub GCP
Opis stanowiska
Będziesz rozwijać i utrzymywać skalowalne rozwiązania przetwarzania danych na Azure, budować pipeline'y integrujące dane z różnych źródeł oraz projektować modele danych. Rola wymaga częstej współpracy z analitykami, architektami, inżynierami i product ownerami na wszystkich etapach projektu, a także dokumentowania pracy z uwzględnieniem wydajności i kosztów chmury. To oferta dla doświadczonego Data Engineera, który dobrze czuje się w Databricks i nie boi się dużej liczby spotkań oraz komunikacji z interesariuszami.
🔍 Dekoder Ogłoszenia
🔴
Collaborate with cross-functional teams including data engineers, data scientists, and cloud architects to deliver end-to-end data platform solutions.
Oznacza to, że będziesz musiał aktywnie współpracować z różnymi zespołami, co może wymagać częstych spotkań i negocjacji, a nie tylko czystej pracy technicznej.
🔴
Engage at all critical stages of project development with business analysts, source system experts, data architects, engineers, and product owners.
Spodziewaj się dużej ilości spotkań i interakcji z różnymi interesariuszami, co może pochłaniać znaczną część czasu.
🔴
Clearly communicate and document technical work, factoring in performance and cost considerations in all design decisions.
Oprócz zadań technicznych, duży nacisk kładziony jest na umiejętności komunikacyjne i dokumentacyjne, a także na optymalizację kosztów chmury.
🔴
knowledge of AWS, GCP clouds will be an additional advantage
Chociaż ogłoszenie skupia się na Azure, znajomość innych chmur może być wykorzystywana w praktyce, nawet jeśli nie jest to główny obszar odpowiedzialności.
🔴
Familiarity with advanced Databricks features (Unity Catalog, MLflow, Jobs & Pipelines).
Wymagana jest znajomość zaawansowanych funkcji Databricks, co może oznaczać, że nie jest to stanowisko dla początkujących w tej technologii.