Senior Data Engineer

Do banku PKO BP poszukujemy osoby na stanowisko Senior Data Engineer/ Architekt systemowy   Forma współpracy: B2B Tryb pracy: hybrydowo (chcemy się spotykać 1x w tygodniu w biurze w Warszawie) Opis stanowiska - budujemy rozwiązania klasy Data Lake i DWH - procesy zasilania zarówno on-line jak i off-line, - projektujemy i realizujemy rozwiązania informatyczne w obszarze zasilania danych, - analizujemy dane oraz przygotowujemy dla nich modele logiczne i fizyczne, - stroimy zapytań SQL na bazach relacyjnych i hurtownianych w on-prem i na chmurze GCP, - tworzymy przepływy off-linowe i on-linowe zarówno w narzędziach on-prem jak i GCP, - tworzymy rozwiązania ładowania danych w Python oraz Rust dla danych strukturalnych i niestrukturalnych, - przygotowujemy datamarty tematyczne na bazach relacyjnych i kolumnowych, - tworzymy koncepcje rozwiązań i implementacje rozwiązań w oparciu o wymagania i - potrzeby biznesu, - usuwamy incydenty i bierzemy udział w rozwiązywaniu problemów, - wspieramy testy i wdrażania zmian w zakresie procesów zasilania danych, - pomagamy przy serwisowaniu wdrożonego oprogramowania, - pracujemy zgodnie z modelem DevSecOps. Wymagania • znajomość aspektów związanych z budową pipeline-ów zasilających ETL/ELT • doświadczenie w budowaniu i projektowaniu rozwiązań Data Lake i DWH • znajomość technologii wykorzystywanych w ramach architektury sterowanej zdarzeniami takich jak np. Kafka, Pub/Sub • znajomość aspektów związanych z budową rozwiązań BigData wykorzystujących możliwości GenAI • znajomość Google BigQuery • znajomość Kubernetes (najlepiej Google Kubernetes Engine i OpenShift) • znajomość relacyjnych baz danych Oracle i PostgreSQL (projektowanie, budowa i tuning baz danych), • biegle znasz języki programowania Python i/lub Rust, • dobrze znasz Apache AirFlow Mile widziana znajomość: • koncepcji data mesh • baz wektorowych i grafowych • Apache Spark - najlepiej GCP Data Proc • Apache Beam – najlepiej GCP DataFlow • AutomateNow • Informatica Power Center