Spark / Data Lakehouse Developer
⚲ Wrocław
21 000 - 26 250 PLN (B2B)
Wymagania
- Apache Spark
- PySpark
- Spark SQL
- MongoDB
- Spark
- Data Lake
- Jenkins
- Prometheus
- Grafana
- Kanban
- Jira
- QA
- DevOps
Opis stanowiska
O projekcie:
Kogo szukamy?
Do zespołu Data Platform szukamy doświadczonego Spark / Data Lakehouse Developera, który będzie rozwijał rozwiązania Data Engineeringowe związane z rekoncyliacją danych, MongoDB oraz architekturą Data Lakehouse.
Oferujemy
- pracę przy nowoczesnej platformie Data Lakehouse,- udział w ciekawych projektach związanych z dużymi zbiorami danych,- pracę z nowoczesnym stackiem: Spark, MongoDB, Iceberg, Kubernetes, Prometheus, Grafana,- możliwość rozwoju i wpływu na rozwiązania technologiczne,- współpracę z doświadczonym zespołem,
Wymagania:
Oczekiwania- min. 4 lata doświadczenia z Apache Spark,- bardzo dobra znajomość PySpark i Spark SQL,- doświadczenie z MongoDB i MongoDB Spark Connector,- praktyczna znajomość Apache Iceberg,- doświadczenie w budowie warstw Data Lakehouse: raw/bronze/silver/gold,- znajomość CI/CD i Jenkins,- znajomość Prometheus i Grafana,- doświadczenie w Scrum/Kanban oraz pracy z Jira/Confluence.
Wymagania
- umiejętność optymalizacji procesów Spark,- doświadczenie w rekoncyliacji i kontroli jakości danych,- znajomość partitioningu, caching, broadcast joins i AQE,- doświadczenie w pracy z dużymi zbiorami danych,- samodzielność i analityczne podejście do rozwiązywania problemów,- umiejętność współpracy z zespołami Data, QA i DevOps.
Kogo szukamy?
Do zespołu Data Platform szukamy doświadczonego Spark / Data Lakehouse Developera, który będzie rozwijał rozwiązania Data Engineeringowe związane z rekoncyliacją danych, MongoDB oraz architekturą Data Lakehouse.
Oferujemy
- pracę przy nowoczesnej platformie Data Lakehouse,- udział w ciekawych projektach związanych z dużymi zbiorami danych,- pracę z nowoczesnym stackiem: Spark, MongoDB, Iceberg, Kubernetes, Prometheus, Grafana,- możliwość rozwoju i wpływu na rozwiązania technologiczne,- współpracę z doświadczonym zespołem,
Wymagania:
Oczekiwania- min. 4 lata doświadczenia z Apache Spark,- bardzo dobra znajomość PySpark i Spark SQL,- doświadczenie z MongoDB i MongoDB Spark Connector,- praktyczna znajomość Apache Iceberg,- doświadczenie w budowie warstw Data Lakehouse: raw/bronze/silver/gold,- znajomość CI/CD i Jenkins,- znajomość Prometheus i Grafana,- doświadczenie w Scrum/Kanban oraz pracy z Jira/Confluence.
Wymagania
- umiejętność optymalizacji procesów Spark,- doświadczenie w rekoncyliacji i kontroli jakości danych,- znajomość partitioningu, caching, broadcast joins i AQE,- doświadczenie w pracy z dużymi zbiorami danych,- samodzielność i analityczne podejście do rozwiązywania problemów,- umiejętność współpracy z zespołami Data, QA i DevOps.
🔍 Dekoder Ogłoszenia
🟡
możliwość rozwoju i wpływu na rozwiązania technologiczne
Ogólny zwrot marketingowy — brak konkretów co do ścieżki rozwoju
🟡
udział w ciekawych projektach związanych z dużymi zbiorami danych
Subiektywne określenie 'ciekawe' — nie wiadomo, czy projekty są faktycznie rozwojowe, czy rutynowe