Data Engineer
⚲ Warszawa
23 520 - 26 040 PLN netto (B2B)
Wymagania
- Azure
- Azure Data Factory
- Databricks
- CI/CD
- SQL
- Argo Workflows
- Kubernetes
- REST API
- Kafka
Opis stanowiska
Wspólnie z naszym Partnerem, międzynarodową organizacją z branży ubezpieczeniowej realizującą strategiczne inicjatywy transformacji danych w wielu krajach, poszukujemy doświadczonego/ej specjalisty/ki do realizacji projektów jako Data Engineer.
Projekt obejmuje rozwój i utrzymanie centralnej platformy integracji danych działającej w pełni w chmurze publicznej.
💡 ZAKRES USŁUG:
• Doradztwo dla biznesu w zakresie wzorców integracji, projektowania potoków danych, orkiestracji procesów i opcji architektonicznych - komunikowanie zagadnień technicznych w sposób zrozumiały dla partnerów nietechnicznych.
• Budowa i rozwój potoków danych: pozyskiwanie danych z heterogenicznych systemów źródłowych, ich transformacja, wzbogacanie i dostarczanie do platform analitycznych i integracyjnych.
• Projektowanie i utrzymanie integracji sterowanych przepływami pracy (workflow) - zapewnienie skalowalności, obserwowalności i niezawodności przepływów danych i procesów.
• Przekładanie potrzeb integracyjnych i danych na skalowalne rozwiązania techniczne, na podstawie ustaleń z interesariuszami projektu.
• Projektowanie, budowa i utrzymanie rozwiązań integracyjnych łączących aplikacje, usługi i strumienie danych w ekosystemie klienta.
• Tworzenie efektywnych zapytań i logiki ekstrakcji, walidacji oraz transformacji danych w korporacyjnych systemach bazodanowych.
🔍 WYMAGANE KOMPETENCJE:
•
Minimum 4 lata doświadczenia w realizacji projektów jako Data Engineer.
• Komunikatywna znajomość języka angielskiego umożliwiająca współpracę w środowisku międzynarodowym.
• Znajomość usług Microsoft Azure, w szczególności Azure Databricks oraz Azure Data Factory.
• Znajomość Argo Workflow, Rest API, Kubernetesa oraz Kafki.
• Doświadczenie w pracy z SQL oraz CI/CD.
✨ OFERUJEMY:
•
Nowy sposób na aplikowanie z AI Rekruterem (AIR) – w trakcie procesu możesz porozmawiać z wirtualnym rekruterem 24/7, bez czekania na telefon. Finalną decyzję zawsze podejmuje Opiekun Projektu.
• Realizacja usług w ramach strategicznego programu budowy platform danych dla międzynarodowej organizacji z branży ubezpieczeniowej.
• Współpraca realizowana w modelu projektowym, z rozliczeniem opartym na etapach i protokołach odbioru poszczególnych deliverables.
• Uczestnictwo w wydarzeniach branżowych oraz meetupach technologicznych, umożliwiających dzielenie się wiedzą i doświadczeniem.
• Wsparcie po stronie Connectis w sprawach administracyjnych i rozliczeniowych związanych ze współpracą.
• Realizacja usług na rzecz Partnera w obszarze Data Engineering, Data Platform oraz DevOps.
• 🌍 Otwartość na okazjonalne spotkania projektowe w Warszawie (centrum miasta).
• 5 000 PLN za polecenie znajomych do naszych projektów.
• Elastyczna forma współpracy B2B.
• Szybki i zdalny proces.
Dziękujemy za wszystkie zgłoszenia. Pragniemy poinformować, że skontaktujemy się z wybranymi osobami.
13229/MP
Projekt obejmuje rozwój i utrzymanie centralnej platformy integracji danych działającej w pełni w chmurze publicznej.
💡 ZAKRES USŁUG:
• Doradztwo dla biznesu w zakresie wzorców integracji, projektowania potoków danych, orkiestracji procesów i opcji architektonicznych - komunikowanie zagadnień technicznych w sposób zrozumiały dla partnerów nietechnicznych.
• Budowa i rozwój potoków danych: pozyskiwanie danych z heterogenicznych systemów źródłowych, ich transformacja, wzbogacanie i dostarczanie do platform analitycznych i integracyjnych.
• Projektowanie i utrzymanie integracji sterowanych przepływami pracy (workflow) - zapewnienie skalowalności, obserwowalności i niezawodności przepływów danych i procesów.
• Przekładanie potrzeb integracyjnych i danych na skalowalne rozwiązania techniczne, na podstawie ustaleń z interesariuszami projektu.
• Projektowanie, budowa i utrzymanie rozwiązań integracyjnych łączących aplikacje, usługi i strumienie danych w ekosystemie klienta.
• Tworzenie efektywnych zapytań i logiki ekstrakcji, walidacji oraz transformacji danych w korporacyjnych systemach bazodanowych.
🔍 WYMAGANE KOMPETENCJE:
•
Minimum 4 lata doświadczenia w realizacji projektów jako Data Engineer.
• Komunikatywna znajomość języka angielskiego umożliwiająca współpracę w środowisku międzynarodowym.
• Znajomość usług Microsoft Azure, w szczególności Azure Databricks oraz Azure Data Factory.
• Znajomość Argo Workflow, Rest API, Kubernetesa oraz Kafki.
• Doświadczenie w pracy z SQL oraz CI/CD.
✨ OFERUJEMY:
•
Nowy sposób na aplikowanie z AI Rekruterem (AIR) – w trakcie procesu możesz porozmawiać z wirtualnym rekruterem 24/7, bez czekania na telefon. Finalną decyzję zawsze podejmuje Opiekun Projektu.
• Realizacja usług w ramach strategicznego programu budowy platform danych dla międzynarodowej organizacji z branży ubezpieczeniowej.
• Współpraca realizowana w modelu projektowym, z rozliczeniem opartym na etapach i protokołach odbioru poszczególnych deliverables.
• Uczestnictwo w wydarzeniach branżowych oraz meetupach technologicznych, umożliwiających dzielenie się wiedzą i doświadczeniem.
• Wsparcie po stronie Connectis w sprawach administracyjnych i rozliczeniowych związanych ze współpracą.
• Realizacja usług na rzecz Partnera w obszarze Data Engineering, Data Platform oraz DevOps.
• 🌍 Otwartość na okazjonalne spotkania projektowe w Warszawie (centrum miasta).
• 5 000 PLN za polecenie znajomych do naszych projektów.
• Elastyczna forma współpracy B2B.
• Szybki i zdalny proces.
Dziękujemy za wszystkie zgłoszenia. Pragniemy poinformować, że skontaktujemy się z wybranymi osobami.
13229/MP
🔍 Dekoder Ogłoszenia
🔴
Doradztwo dla biznesu w zakresie wzorców integracji, projektowania potoków danych, orkiestracji procesów i opcji architektonicznych - komunikowanie zagadnień technicznych w sposób zrozumiały dla partnerów nietechnicznych.
Oczekuje się, że będziesz musiał tłumaczyć skomplikowane kwestie techniczne nietechnicznym odbiorcom, co może być czasochłonne i frustrujące.
🟡
Projekt obejmuje rozwój i utrzymanie centralnej platformy integracji danych działającej w pełni w chmurze publicznej.
Praca będzie polegać głównie na utrzymaniu istniejącej infrastruktury, a nie na budowaniu od podstaw innowacyjnych rozwiązań.
🔴
Przekładanie potrzeb integracyjnych i danych na skalowalne rozwiązania techniczne, na podstawie ustaleń z interesariuszami projektu.
Może to oznaczać, że będziesz musiał radzić sobie z niejasnymi lub zmieniającymi się wymaganiami od różnych osób.
🟡
Projektowanie, budowa i utrzymanie rozwiązań integracyjnych łączących aplikacje, usługi i strumienie danych w ekosystemie klienta.
Zakres obowiązków jest szeroki i może obejmować wiele różnych technologii i systemów, co wymaga wszechstronności.
🟡
Tworzenie efektywnych zapytań i logiki ekstrakcji, walidacji oraz transformacji danych w korporacyjnych systemach bazodanowych.
Duża część pracy będzie polegać na pisaniu zapytań SQL i manipulacji danymi w istniejących, potencjalnie starych systemach.