Pracuj.pl Praca zdalna Expert New

Principal Data Platform Engineer (Databricks)

IN4GE sp. z o.o.

⚲ Warszawa

160–200 zł netto (+ VAT) / godz.

Wymagania

  • Databricks

Opis stanowiska

Nasze wymagania: Minimum 12 lat doświadczenia w IT (środowiska korporacyjne, globalne). Bardzo dobra znajomość języka angielskiego (min. B2). Mocne podstawy software engineering (preferowane nad czysto data/BI profile) Doświadczenie z: a) platformami lakehouse (Databricks), b) architekturą streamingową / near real-time, c) Databricks Structured Streaming, Delta Live Tables. Znajomość: a) integracji z Power BI, b) środowiska Microsoft Azure / M365, c) usług Azure (Functions, Service Bus/Event Hub, App Services, Cosmos DB), d) MongoDB. Doświadczenie w DevOps/DataOps:CI/CD, Infrastructure as Code. Doświadczenie z narzędziami AI wspierającymi development (np. GitHub Copilot, Codex, Claude, Gemini). Umiejętność pracy w środowisku niejednoznacznym i budowania rozwiązań od podstaw. O projekcie: Dla naszego klienta poszukujemy doświadczonej osoby, która obejmie kluczową rolę techniczną w rozwoju platformy platforma wspierającej usługi doradztwa podatkowego. To rola łącząca Tech Leada i Team Leada, z realnym wpływem na kierunek rozwoju technologii oraz pracę zespołu inżynierskiego. Szukamy osoby, która: • dobrze odnajduje się w środowisku platformowym i architektonicznym, • potrafi łączyć technologię z leadershipem, • ma doświadczenie w nowoczesnych platformach danych, • rozumie podejście streaming-first, a nie wyłącznie klasyczne ETL/batch processing, • potrafi wpływać na kierunek techniczny wielu zespołów. Zakres obowiązków: Platforma Databricks • Pełnienie roli Tech Leada dla rozwoju platformy Databricks Lakehouse. • Wsparcie zespołów w budowie produktów dataowych (best practices, wzorce, narzędzia). • Projektowanie warstw abstrakcji i frameworków upraszczających pracę developerów. • Rozwój platformy zgodnie z podejściem developer-first (nie tylko klasyczne ETL). Nowoczesna architektura danych (Streaming) • Rozwój architektury opartej na streamingu i event-driven. • Wsparcie transformacji z klasycznych hurtowni danych (batch) do nowoczesnych rozwiązań. • Podejmowanie decyzji architektonicznych (wydajność, skalowalność, niezawodność). DevOps & Infrastructure • Wdrażanie podejścia DevOps/DataOps (CI/CD, Infrastructure as Code). • Współodpowiedzialność za decyzje infrastrukturalne dotyczące platformy. • Monitoring i optymalizacja kosztów Databricks. • Współpraca przy skalowaniu i governance platformy. Integracje technologiczne • Integracja Databricks z narzędziami takimi jak: - Power BI, - Microsoft Fabric, - inne systemy konsumpcji danych, • Wsparcie zespołów na styku data platformy i BI. Leadership • Prowadzenie zespołu (DevOps, platform engineers, wsparcie Power BI). • Mentoring i rozwój inżynierów. • Definiowanie kierunku technicznego dla platformy. • Współpraca z biznesem i stakeholderami przy realizacji strategii. Oferujemy: Możliwość realnego wpływu na rozwój nowoczesnej platformy danych wykorzystywanej globalnie. Kluczową rolę techniczną w środowisku opartym o Databricks, streaming i nowoczesną architekturę danych. Pracę przy dużej skali oraz złożonych rozwiązaniach enterprise. Dużą samodzielność i wpływ na decyzje architektoniczne oraz technologiczne. Współpracę z doświadczonymi zespołami engineeringowymi i stakeholderami biznesowymi. Możliwość rozwoju w obszarze platform engineering, data architecture oraz leadershipu technicznego. Dostęp do nowoczesnych narzędzi i technologii, w tym rozwiązań AI wspierających development. Międzynarodowe środowisko pracy oraz współpracę z globalnymi zespołami. Elastyczny model współpracy i długofalowy projekt w strategicznym obszarze organizacji.