Senior Data Engineer (GCP)
⚲ Warszawa
26 880 - 30 240 PLN netto (B2B)
Wymagania
- GCP
- data governance
- BigQuery
- SQL
Opis stanowiska
📍 Lokalizacja: praca zdalna
💰 Wynagrodzenie: 160-180 PLN netto/h + VAT
🚀 Start: ASAP
⏳ Czas trwania projektu: kontrakt długoterminowy
Klientem jest jeden z wiodących operatorów telekomunikacyjnych w Polsce, realizujący strategiczny program transformacji danych. Firma stawia na innowacje, transformację cyfrową i nowoczesne technologie, w tym rozwiązania AI/LLM.
Opis projektu:
Projekt obejmuje migrację środowisk analitycznych z architektury on-premise do Google Cloud Platform (GCP) oraz budowę nowoczesnej platformy danych wspierającej procesy biznesowe, analitykę, poprawę doświadczeń użytkowników i przyszłe wykorzystanie rozwiązań AI/LLM.
Zakres obowiązków:
• Projektowanie i wdrażanie procesów oraz standardów Data Governance w środowisku GCP.
• Budowa i rozwój katalogu danych oraz zarządzanie metadanymi.
• Definiowanie modeli metadanych, struktur katalogu danych oraz relacji między obiektami.
• Implementacja rozwiązań zapewniających data lineage, data quality oraz data ownership.
• Tworzenie i egzekwowanie standardów oraz polityk dostępu do danych (access management).
• Współpraca z zespołami Data Engineering, BI oraz właścicielami danych w zakresie governance i jakości danych.
• Wsparcie użytkowników biznesowych w wyszukiwaniu, rozumieniu i wykorzystaniu danych.
• Udział w definiowaniu i wdrażaniu Data Contracts oraz standardów wymiany danych.
• Dokumentowanie procesów, standardów i modeli danych.
Wymagania:
• Co najmniej 5 lat doświadczenia w środowisku GCP w roli Data Engineera.
• Co najmniej 3 lata doświadczenia w obszarze Data Governance / Data Management / Data Quality.
• Praktyczna znajomość ekosystemu Google Cloud Platform, w szczególności BigQuery, Dataplex, Data Catalog.
• Doświadczenie w modelowaniu danych oraz pracy z metadanymi.
• Zaawansowana znajomość SQL poparta praktycznym doświadczeniem zawodowym – optymalizacja zapytań, tworzenie agregacji, zarządzanie indeksami.
• Znajomość zagadnień: data lineage, data quality, data stewardship, data ownership.
• Doświadczenie w tworzeniu dokumentacji technicznej oraz w code review.
• Umiejętność pracy zespołowej i komunikacji z zespołami biznesowymi, technicznymi i analitycznymi.
• Proaktywność, odpowiedzialność i nastawienie na jakość w obszarze danych.
Mile widziane:
• Znajomość Apache Spark oraz Python.
• Doświadczenie z Kubernetes i Terraform.
• Doświadczenie z Looker oraz Vertex AI.
• Doświadczenie w projektowaniu architektury danych.
• Znajomość przetwarzania danych w modelach batch i streaming.
• Doświadczenie z CI/CD oraz monitoringiem / SLO.
• Zainteresowanie rozwiązaniami AI/LLM.
• Doświadczenie w projektach migracji środowisk analitycznych do chmury.
Oferujemy:
• 160 - 180 PLN/h netto w ramach kontraktu B2B,
• elastyczną formę rozliczeń,
• krótki, 14-dniowy termin płatności faktury,
• kompleksowy pakiet prywatnej opieki medycznej,
• dostęp do platformy kafeteryjnej MyBenefit (w tym karty Multisport oraz karty przedpłacone do IKEA, Zalando, Notino i wielu innych partnerów),
• udział w strategicznym projekcie transformacji danych u lidera rynku telekomunikacyjnego.
💰 Wynagrodzenie: 160-180 PLN netto/h + VAT
🚀 Start: ASAP
⏳ Czas trwania projektu: kontrakt długoterminowy
Klientem jest jeden z wiodących operatorów telekomunikacyjnych w Polsce, realizujący strategiczny program transformacji danych. Firma stawia na innowacje, transformację cyfrową i nowoczesne technologie, w tym rozwiązania AI/LLM.
Opis projektu:
Projekt obejmuje migrację środowisk analitycznych z architektury on-premise do Google Cloud Platform (GCP) oraz budowę nowoczesnej platformy danych wspierającej procesy biznesowe, analitykę, poprawę doświadczeń użytkowników i przyszłe wykorzystanie rozwiązań AI/LLM.
Zakres obowiązków:
• Projektowanie i wdrażanie procesów oraz standardów Data Governance w środowisku GCP.
• Budowa i rozwój katalogu danych oraz zarządzanie metadanymi.
• Definiowanie modeli metadanych, struktur katalogu danych oraz relacji między obiektami.
• Implementacja rozwiązań zapewniających data lineage, data quality oraz data ownership.
• Tworzenie i egzekwowanie standardów oraz polityk dostępu do danych (access management).
• Współpraca z zespołami Data Engineering, BI oraz właścicielami danych w zakresie governance i jakości danych.
• Wsparcie użytkowników biznesowych w wyszukiwaniu, rozumieniu i wykorzystaniu danych.
• Udział w definiowaniu i wdrażaniu Data Contracts oraz standardów wymiany danych.
• Dokumentowanie procesów, standardów i modeli danych.
Wymagania:
• Co najmniej 5 lat doświadczenia w środowisku GCP w roli Data Engineera.
• Co najmniej 3 lata doświadczenia w obszarze Data Governance / Data Management / Data Quality.
• Praktyczna znajomość ekosystemu Google Cloud Platform, w szczególności BigQuery, Dataplex, Data Catalog.
• Doświadczenie w modelowaniu danych oraz pracy z metadanymi.
• Zaawansowana znajomość SQL poparta praktycznym doświadczeniem zawodowym – optymalizacja zapytań, tworzenie agregacji, zarządzanie indeksami.
• Znajomość zagadnień: data lineage, data quality, data stewardship, data ownership.
• Doświadczenie w tworzeniu dokumentacji technicznej oraz w code review.
• Umiejętność pracy zespołowej i komunikacji z zespołami biznesowymi, technicznymi i analitycznymi.
• Proaktywność, odpowiedzialność i nastawienie na jakość w obszarze danych.
Mile widziane:
• Znajomość Apache Spark oraz Python.
• Doświadczenie z Kubernetes i Terraform.
• Doświadczenie z Looker oraz Vertex AI.
• Doświadczenie w projektowaniu architektury danych.
• Znajomość przetwarzania danych w modelach batch i streaming.
• Doświadczenie z CI/CD oraz monitoringiem / SLO.
• Zainteresowanie rozwiązaniami AI/LLM.
• Doświadczenie w projektach migracji środowisk analitycznych do chmury.
Oferujemy:
• 160 - 180 PLN/h netto w ramach kontraktu B2B,
• elastyczną formę rozliczeń,
• krótki, 14-dniowy termin płatności faktury,
• kompleksowy pakiet prywatnej opieki medycznej,
• dostęp do platformy kafeteryjnej MyBenefit (w tym karty Multisport oraz karty przedpłacone do IKEA, Zalando, Notino i wielu innych partnerów),
• udział w strategicznym projekcie transformacji danych u lidera rynku telekomunikacyjnego.
🔍 Dekoder Ogłoszenia
🔴
strategiczny program transformacji danych
Projekt może być ambitny i długoterminowy, ale też potencjalnie obarczony dużym ryzykiem zmian i niepewnością co do ostatecznego kształtu.
🔴
budowa nowoczesnej platformy danych
Może oznaczać pracę nad nowymi, nie w pełni zdefiniowanymi rozwiązaniami, gdzie wiele rzeczy będzie tworzone od zera.
🔴
wspierająca procesy biznesowe, analitykę, poprawę doświadczeń użytkowników i przyszłe wykorzystanie rozwiązań AI/LLM
Zakres projektu jest bardzo szeroki i może wymagać od inżyniera danych umiejętności wykraczających poza typowe zadania, w tym zrozumienia potrzeb biznesowych i potencjalnie pracy z modelami AI/LLM.
🟡
Definiowanie modeli metadanych, struktur katalogu danych oraz relacji między obiektami.
Może to oznaczać dużą ilość pracy koncepcyjnej i architektonicznej, która może być czasochłonna i wymagać głębokiego zrozumienia danych.
🟡
Wsparcie użytkowników biznesowych w wyszukiwaniu, rozumieniu i wykorzystaniu danych.
Oprócz zadań technicznych, rola może wymagać znaczącej komunikacji i edukacji użytkowników nietechnicznych.