Data Platform Engineer with Apache Druid.
⚲ Remote
28 560 - 33 600 PLN (B2B)
Wymagania
- zaawansowane doświadczenie w ingestii danych w Apache Druid i tworzeniu rozszerzeń tej platformy
- doświadczenie w budowie i utrzymaniu potoków danych opartych na Apache Kafka
- doświadczenie z Apache Flink lub podobnymi technologiami stream processingu
- bardzo dobra znajomość optymalizacji zapytań MySQL i strojenia wydajności baz w dużej skali
- doświadczenie we wdrażaniu mechanizmów wzbogacania metadanych w platformach danych
- doświadczenie w integracji i utrzymaniu RBAC w wielu repozytoriach danych
- praktyczne doświadczenie z AWS, w szczególności S3, Aurora i IAM
Mile widziane
- doświadczenie z ClickHouse, Apache Iceberg, lakehouse, Trino lub Amazon Athena
Opis stanowiska
Będziesz rozwijać i utrzymywać potoki ingestii danych w Apache Druid, w tym tworzyć niestandardowe rozszerzenia platformy i integracje z zewnętrznymi systemami lookup. Rola obejmuje pipeline'y oparte na Kafce (z możliwością pracy ze stream processingiem we Flinku), wstępną agregację i wzbogacanie danych, optymalizację zapytań MySQL oraz wdrażanie mechanizmów RBAC i wzbogacania metadanych w usługach AWS (S3, Aurora, IAM). To oferta dla inżyniera platformy danych, który lubi pracować blisko architektury lakehouse i rozwiązywać złożone problemy wydajnościowe.
🔍 Dekoder Ogłoszenia
✓ Ogłoszenie wygląda transparentnie — brak typowych czerwonych flag.