Data Engineer Senior (he/she)
B2Bnetwork
⚲ Warszawa
20 680 - 23 520 PLN netto (B2B)
Wymagania
- Apache Kafka
- Neo4j
- Python
Opis stanowiska
Twój zakres obowiązków • Projektowanie, budowa oraz rozwój rozwiązań opartych o bazy grafowe Neo4j • Modelowanie grafów danych zgodnie z wymaganiami biznesowymi oraz optymalizacja ich wydajności • Tworzenie i utrzymanie zapytań grafowych oraz analiza zależności danych • Projektowanie i implementacja pipeline’ów ETL/ELT zasilających rozwiązania grafowe • Integracja danych z różnych źródeł w środowisku chmurowym GCP • Tworzenie rozwiązań w architekturze sterowanej zdarzeniami z wykorzystaniem Kafka i Pub/Sub Nasze wymagania • Praktyczne doświadczenie w pracy z bazą grafową Neo4j • Dobra znajomość koncepcji teorii grafów • Doświadczenie w modelowaniu grafów oraz optymalizacji wydajności zapytań • Znajomość środowiska chmurowego Google Cloud Platform (GCP) • Znajomość zagadnień związanych z budową pipeline’ów zasilających ETL/ELT • Doświadczenie w pracy z architekturą sterowaną zdarzeniami (Kafka, Pub/Sub) • Znajomość rozwiązań Big Data wykorzystujących możliwości GenAI • Znajomość Google BigQuery • Znajomość języka Python • Znajomość narzędzi CI/CD Mile widziane • Apache Spark – preferowane środowisko GCP Dataproc • Apache Beam – preferowane środowisko GCP Dataflow • AutomateNow • Apache Airflow • Rust