Data Engineer
IT SQUAD SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ
⚲ Warszawa
Do uzgodnienia
Wymagania
- min. 5 lat doświadczenia w projektowaniu, tworzeniu i wdrażaniu wysokowydajnych pipeline'ów danych — batch i streaming
- doświadczenie w budowie i utrzymaniu bezpiecznych, niezawodnych i skalowalnych Data Lake oraz Data Warehouse na GCP
- doświadczenie w prowadzeniu projektów klienckich do zakończenia
- bardzo dobra znajomość BigQuery i Ab Initio
- znajomość DevOps oraz CI/CD
- certyfikat Google Cloud Professional Data Engineer
- płynna znajomość języka angielskiego — C1
Mile widziane
- znajomość języka niemieckiego
Opis stanowiska
Będziesz projektować, rozwijać i wdrażać wysokowydajne pipeline'y danych w modelu batch i streaming oraz budować i utrzymywać bezpieczne, skalowalne Data Lake i Data Warehouse na Google Cloud. Praca obejmuje projekty migracji i transformacji danych, automatyzację provisioningu infrastruktury, CI/CD oraz współpracę z zespołami Google Cloud i klientami. Uwaga: ogłoszenie wymaga bardzo dobrej znajomości Ab Initio — narzędzia niszowego, często kojarzonego ze specyficznymi, starszymi systemami, co może oznaczać pracę w wąskiej dziedzinie.
🔍 Dekoder Ogłoszenia
🔴
Doświadczenie w prowadzeniu projektów klienckich do zakończenia.
Oczekuje się, że będziesz samodzielnie zarządzać całym cyklem życia projektu, od koncepcji po wdrożenie, często w roli głównego punktu kontaktu z klientem.
🔴
Rozwiązań chmurowych klasy enterprise.
Chodzi o złożone, często wielowarstwowe systemy, które muszą spełniać wysokie standardy bezpieczeństwa, skalowalności i niezawodności, co może oznaczać dużą odpowiedzialność i skomplikowane wyzwania techniczne.
🔴
Bardzo dobra znajomość BigQuery i Ab Initio.
Ab Initio jest narzędziem niszowym i często kojarzonym z bardzo specyficznymi, starszymi systemami, co może oznaczać pracę z przestarzałą technologią lub w bardzo wąskiej dziedzinie.
🔴
Projektowanie rozwiązań typu internet-scale.
Oznacza to projektowanie systemów zdolnych obsłużyć ruch na skalę globalną, co wiąże się z ekstremalnymi wymaganiami dotyczącymi wydajności, skalowalności i odporności na awarie.