Data Engineer
⚲ Katowice
170–200 zł netto (+ VAT) / godz.
Wymagania
- doświadczenie w projektach migracyjnych z on-premise do chmury
- bardzo dobra znajomość Pythona (ETL, pipeline'y danych, automatyzacja)
- bardzo dobra znajomość Javy
- umiejętność projektowania i architektowania rozwiązań danych w GCP (skalowalność, bezpieczeństwo, optymalizacja kosztów)
- angielski C1 (codzienna komunikacja, warsztaty techniczne, dokumentacja)
- doświadczenie w analizie rozwiązań legacy i rekomendowaniu docelowych architektur chmurowych
- znajomość data governance, bezpieczeństwa danych i kontroli dostępu w chmurze
Mile widziane
- doświadczenie z platformą Cloudera lub rozwiązaniami opartymi na Hadoop
Opis stanowiska
Scalo prowadzi migrację platformy danych klienta z Cloudera (on-premise) do Google Cloud Platform oraz wdrożenie nowych rozwiązań Data/AI w chmurze. Będziesz projektować ścieżkę migracji, modernizować istniejące procesy i budować rozwiązania z wykorzystaniem Dataproc, Dataflow, BigQuery i Cloud Composer. To oferta dla Data Engineera z doświadczeniem w projektach migracyjnych i architekturze danych w GCP, gotowego pracować w Katowicach. Uwaga: zakres obejmuje analizę rozwiązań legacy i ich modernizację, co bywa czasochłonne i frustrujące — warto dopytać o stan istniejących systemów.
🔍 Dekoder Ogłoszenia
🔴
doświadczenie w realizacji projektów migracyjnych z on-premise do środowisk chmurowych
Może oznaczać zarówno zaplanowane, dobrze udokumentowane migracje, jak i chaotyczne przenosiny z minimalnym przygotowaniem.
🔴
mile widziane doświadczenie z platformą Cloudera lub innymi rozwiązaniami opartymi na Hadoop
Jeśli nie masz tego doświadczenia, Twoje szanse mogą być mniejsze, nawet jeśli spełniasz inne wymagania.
🟡
bardzo dobra znajomość języka Python, w szczególności w obszarze ETL, budowy pipeline’ów danych oraz automatyzacji
Oczekiwana jest biegłość w tworzeniu złożonych procesów przetwarzania danych, a nie tylko podstawowe skrypty.
🟡
umiejętność projektowania i architektowania rozwiązań danych w GCP z uwzględnieniem skalowalności, bezpieczeństwa oraz optymalizacji kosztów
Oczekuje się od Ciebie samodzielnego tworzenia przemyślanych i efektywnych architektur, a nie tylko implementacji gotowych rozwiązań.
🔴
doświadczenie w analizie istniejących rozwiązań legacy oraz rekomendowaniu docelowych architektur w środowiskach chmurowych
Może oznaczać pracę z przestarzałymi systemami i konieczność ich modernizacji, co bywa czasochłonne i frustrujące.