Data Engineer (GCP / BigQuery / Python) (K/M)

Nasze wymagania:
Doświadczenie z BigQuery
Doświadczenie z Cloud Composer
Doświadczenie z Pythonem
Praktyczna znajomość Dataproc
Praktyczna znajomość Dataflow
Praktyczna znajomość Datastream
Znajomość SQL
Znajomość GitLab
Znajomość Terraform
Doświadczenie z ekosystemem GCP
Doświadczenie w branży energetycznej
Certyfikacja Google Cloud

Mile widziane:
Certyfikat Google Cloud Professional Data Engineer
Doświadczenie z Cloud Run
Doświadczenie z Dataplex Universal Catalog
Doświadczenie z Informatica IDMC
Doświadczenie z SAP Datasphere
Doświadczenie z Azure Databricks

O projekcie:
Projekt w branży energetycznej obejmuje projektowanie, rozwój i utrzymanie procesów przetwarzania oraz integracji danych w środowisku Google Cloud Platform.
Praca dotyczy rozwiązań batch, streaming i CDC, automatyzacji procesów, orkiestracji przepływów danych oraz zapewniania ich jakości i bezpieczeństwa w środowisku multi-cloud.

Zakres obowiązków:
Analiza wymagań i projektowanie przepływów danych
Budowa i utrzymanie procesów ETL/ELT oraz DAG-ów
Integracja źródeł danych, w tym wykorzystanie mechanizmów CDC
Automatyzacja wdrożeń, CI/CD oraz Infrastructure as Code
Monitorowanie i optymalizacja przetwarzania danych
Zarządzanie uprawnieniami, dokumentacja i code review

Oferujemy:
Praca hybrydowa / zdalna (do ustalenia)
Start: ASAP
Czas trwania projektu: 12 miesięcy
Język pracy: polski
Wsparcie formalne podczas onboardingu