Big Data Engineer / Engineerka
⚲ Warszawa, Wola
Do uzgodnienia
Wymagania
- min. 5 lat doświadczenia w obszarze Big Data Engineering
- doświadczenie w rozwoju i optymalizacji procesów ETL oraz aplikacji do przetwarzania danych
- znajomość Apache Spark i Apache Airflow
- doświadczenie w pracy z Pythonem lub Scalą oraz SQL
- znajomość rozwiązań Big Data: Hadoop, Hive, Snowflake lub Trino
- znajomość Kubernetes lub OpenShift
Mile widziane
- doświadczenie z Neo4j lub innymi grafowymi bazami danych
- doświadczenie z rozwiązaniami chmurowymi (np. Azure) i udział w migracjach platform danych lub POC
Opis stanowiska
Rozwój i optymalizacja procesów ETL oraz aplikacji opartych na Apache Spark, projektowanie rozwiązań Big Data i udział w migracji platformy danych. Będziesz orkiestrować procesy w Apache Airflow, testować nowe technologie w ramach POC oraz prowadzić prace badawczo-rozwojowe nad grafowymi bazami danych i chatbotem do zadawania pytań do hurtowni w języku naturalnym. Dobra oferta dla inżyniera Big Data, który lubi eksperymentować z nowymi technologiami i ma już solidne doświadczenie w Sparku i Airflow.
🔍 Dekoder Ogłoszenia
✓ Ogłoszenie wygląda transparentnie — brak typowych czerwonych flag.