Pracuj.pl Hybrydowo Mid

Data Engineer

B2B.NET S.A.

⚲ Gdańsk, Gdynia, Warszawa

Do uzgodnienia

Wymagania

  • ETL
  • SQL
  • PL/SQL
  • Apache Kafka
  • REST API
  • DB2
  • Snowflake
  • Amazon S3

Opis stanowiska

Nasze wymagania:
Doświadczenie w projektowaniu i budowie procesów ETL.
Bardzo dobra znajomość SQL.
Doświadczenie w programowaniu baz danych (PL/SQL lub równoważne rozwiązania).
Praktyczna znajomość Apache Kafka.
Doświadczenie w integracji systemów z wykorzystaniem REST API.
Umiejętność projektowania i optymalizacji przepływów danych.
Komunikatywna znajomość języka angielskiego.

Mile widziane:
Znajomość DB2.
Doświadczenie z Snowflake.
Znajomość rozwiązań Amazon S3 lub innych obiektowych magazynów danych.

O projekcie:
Dołącz do projektu realizowanego w międzynarodowym środowisku, którego celem jest rozwój nowoczesnych rozwiązań do integracji i udostępniania danych. Osoba na tym stanowisku będzie uczestniczyć w budowie oraz rozwoju procesów ETL, projektowaniu przepływów danych oraz tworzeniu fundamentów dla nowoczesnej architektury data sharing.

Zakres obowiązków:
Projektowanie, rozwój i utrzymanie procesów ETL oraz pipeline'ów danych.
Integracja danych pomiędzy różnymi systemami i aplikacjami.
Tworzenie przepływów danych w modelu batch oraz streaming.
Współpraca z zespołami odpowiedzialnymi za architekturę danych.
Rozwijanie rozwiązań wspierających udostępnianie i wymianę danych.
Udział w tworzeniu i wdrażaniu standardów integracji oraz jakości danych.

🔍 Dekoder Ogłoszenia

🟡
Dołącz do projektu realizowanego w międzynarodowym środowisku, którego celem jest rozwój nowoczesnych rozwiązań do integracji i udostępniania danych.
Projekt może być duży i złożony, z potencjalnie wieloma interesariuszami i różnymi podejściami do rozwiązywania problemów.
🟡
Osoba na tym stanowisku będzie uczestniczyć w budowie oraz rozwoju procesów ETL, projektowaniu przepływów danych oraz tworzeniu fundamentów dla nowoczesnej architektury data sharing.
Może to oznaczać zarówno pracę nad istniejącymi, jak i tworzenie od podstaw nowych rozwiązań, co może wiązać się z niepewnością co do kierunku rozwoju.
🟡
Współpraca z zespołami odpowiedzialnymi za architekturę danych.
Może oznaczać konieczność negocjowania i dostosowywania się do decyzji architektonicznych, które niekoniecznie muszą być zgodne z Twoimi preferencjami.
🟡
Udział w tworzeniu i wdrażaniu standardów integracji oraz jakości danych.
Może oznaczać pracę nad dokumentacją i procesami, które nie są jeszcze w pełni zdefiniowane lub mogą wymagać znaczących zmian.