Data Engineer (Spark/Data Lakehouse) | Branża bankowa
⚲ Wrocław
20 000 – 35 000 zł / mies.
Wymagania
- min. 4 lata doświadczenia w data engineeringu w środowiskach produkcyjnych
- bardzo dobra znajomość Python, Apache Spark, PySpark, Spark SQL i DataFrames
- doświadczenie ze Structured Streaming
- praktyczna znajomość MongoDB oraz integracji ze Spark przez MongoDB Spark Connector
- doświadczenie z Apache Iceberg (wersjonowanie tabel, merge/upsert)
- doświadczenie z Jenkins i procesami CI/CD (spark-unit, integration)
- znajomość Prometheus i Grafana
Mile widziane
- doświadczenie z Liquibase, OpenShift i Dockerem
Opis stanowiska
Projekt w banku uniwersalnym, gdzie będziesz projektować i rozwijać procesy rekoncyliacji oraz synchronizacji danych w środowisku Spark/PySpark i MongoDB, a także budować warstwy Data Lakehouse (Raw/Bronze → Silver → Gold). Praca obejmuje zarówno przetwarzanie batchowe, jak i streamingowe, optymalizację wydajności oraz monitoring. To oferta dla doświadczonych data engineerów, którzy chcą pracować przy dużych wolumenach danych w środowisku produkcyjnym. Model pracy zdalny z jednodniowymi wizytami w biurze we Wrocławiu raz w miesiącu.
🔍 Dekoder Ogłoszenia
✓ Ogłoszenie wygląda transparentnie — brak typowych czerwonych flag.