JustJoin.IT Praca zdalna Senior New

Lead Data Engineer (Azure / Fabric)

IT Squad

⚲ Warszawa

Wymagania

  • Azure
  • Azure Data Factory
  • Airflow
  • SQL
  • Python
  • ETL

Opis stanowiska

ZAKRES OBOWIĄZKÓW • Projektowanie i wdrażanie end-to-end pipeline’ów danych (od zasilania, przez transformację, po udostępnianie) • Zarządzanie warstwą orkiestracji (np. Azure Data Factory / Fabric Data Pipelines / Airflow) • Projektowanie i implementacja architektury Medallion (Bronze / Silver / Gold) • Zapewnianie niezawodności pipeline’ów, w tym monitoringu oraz mechanizmów alertowania • Implementacja kontroli jakości danych oraz walidacji (data quality checks) • Optymalizacja wydajności przetwarzania oraz kosztów operacyjnych • Współpraca z Data Architectem w zakresie modelowania danych i decyzji architektonicznych • Integracja danych z wielu źródeł (MS SQL, API, systemy zewnętrzne, np. Meta) • Definiowanie i wdrażanie best practices (CI/CD, versioning, deployment workflows) • Pełnienie roli lidera technicznego oraz mentoring zespołu inżynierskiego  CZEGO OCZEKUJEMY CZEGO OCZEKUJEMY • Doświadczenia z platformą Azure Data (preferowany Microsoft Fabric; alternatywnie ADF / Synapse / Databricks) • Praktycznej znajomości narzędzi:  • Orkiestracja: Azure Data Factory, Fabric Data Pipelines, Airflow  • Transformacja: dbt  • ELT / Ingestion: natywne rozwiązania Azure + Airbyte (opcjonalnie)  • Przetwarzanie danych: SQL, Python • Doświadczenia w modelowaniu danych oraz pracy z warstwami transformacji • Dobrej znajomości:  • frameworków data quality  • monitoringu i observability pipeline’ów • Doświadczenia w architekturach batch processing • Umiejętności podejmowania decyzji technicznych oraz terminowego dostarczania rozwiązań MILE WIDZIANE • Doświadczenie z Microsoft Fabric (OneLake / Lakehouse) • Doświadczenie w pracy z danymi z sektora Life Sciences / Healthcare • Znajomość zagadnień Data Governance CO OFERUJEMY CO OFERUJEMY • Pracę przy projektach klienckich i produktach własnych. • Realny wpływ na rozwiązania biznesowe i technologiczne w ramach realizowanych projektów • Eventy firmowe, dostęp do usług medycznych oraz pakietów sportowych • Zatrudnienie na umowę B2B • Pracę w 100% zdalną lub hybrydową (Warszawa) • Krótki proces rekrutacji składający się z HR interview oraz rozmowy technicznej z managerem zespołu