Senior Data Quality Engineer
⚲ Warszawa
Do uzgodnienia
Wymagania
- SQL
- Python
- Databricks
Opis stanowiska
W ITLT pomagamy naszym zaprzyjaźnionym firmom przekształcać ambitne pomysły w cyfrową rzeczywistość. Z nastawieniem na wyzwania, ciekawość technologii i zwinność współtworzymy wyjątkowe rozwiązania IT i zapewniamy doświadczone osoby eksperckie, które pomagają przyspieszać cyfrową transformację.
Aktualnie poszukujemy profilu na stanowisko: Senior Data Quality Engineer
Informacje organizacyjne:
•
Tryb pracy: zdalny
• Projekt: Dołącz do nowo powstającego zespołu odpowiedzialnego za budowę i rozwój centralnej platformy Monitoring & Observability (M&O) oraz Data Quality dla globalnej organizacji. Projekt koncentruje się na zapewnieniu wysokiej jakości danych, niezawodności procesów danych oraz monitoringu platform i aplikacji działających w środowisku enterprise.
• Technologie na projekcie: SQL, Python, Databricks, Fivetran, SAP, Power BI, Grafana, Azure, Azure SQL, Kafka, Apache Flink, GitHub, GitHub Actions, CI/CD, Cloud Technologies.
•
Zakres prac:
• Projektowanie, implementacja i rozwój reguł kontroli jakości danych (Data Quality Rules).
• Budowa i rozwój Data Quality Engine wspierającego walidację danych w procesach ETL/ELT.
• Monitorowanie jakości danych w pipeline'ach oraz identyfikacja anomalii i problemów jakościowych.
• Definiowanie oraz mierzenie kluczowych wymiarów jakości danych:
Accuracy,
• Completeness,
• Consistency,
• Timeliness,
• Validity,
• Uniqueness.
• Analiza przyczyn źródłowych problemów związanych z jakością danych (Root Cause Analysis).
• Tworzenie rozwiązań automatyzujących procesy kontroli jakości danych.
• Raportowanie, wizualizacja oraz prezentacja wyników monitoringu Data Quality.
• Współpraca z zespołami Data Engineering, Business oraz właścicielami źródeł danych.
• Wdrażanie najlepszych praktyk związanych z jakością danych oraz ciągłe doskonalenie istniejących mechanizmów monitoringu.
Oczekiwania:
• Minimum kilkuletnie doświadczenie w obszarze Data Quality, Data Validation lub Data Profiling.
• Praktyczna znajomość metodologii oraz wymiarów jakości danych.
• Doświadczenie w projektowaniu i wdrażaniu reguł walidacyjnych oraz kontroli jakości danych.
• Bardzo dobra znajomość SQL wykorzystywanego do analizy i walidacji danych.
• Doświadczenie w tworzeniu rozwiązań automatyzujących procesy Data Quality z wykorzystaniem Python.Dobra znajomość procesów ETL/ELT oraz architektury data pipeline’ów.
• Doświadczenie w pracy z platformą Databricks.
• Umiejętność identyfikowania i analizowania przyczyn źródłowych problemów jakości danych.
• Doświadczenie w pracy z dużymi wolumenami danych oraz wieloma źródłami danych.
Mile widziane:
• Doświadczenie z Fivetran.Znajomość danych i integracji z systemami SAP.
• Doświadczenie w budowie dashboardów i raportów w Power BI lub Grafanie.
• Znajomość Azure oraz Azure SQL.
• Doświadczenie z Kafka lub Apache Flink.
• Znajomość procesów CI/CD.
• Doświadczenie pracy z dużymi platformami danych w środowiskach enterprise
Oferujemy:
• Długofalowe stabilne zatrudnienie w oparciu o kontrakt B2B.
• Szansa na rozwój w dużej strukturze, bezpośredni kontakt z Managerem zespołu.
• Praca w firmie, w której IT jest dojrzałe i globalne, a metodyki zwinne są respektowane.
• Dopłata do karty MultiSport oraz ubezpieczenia.
• Godziny startu pracy 7:30 - 9:30.
• Sprawny proces rekrutacyjny (wideokonferencja), maksymalnie 2 spotkania online (pierwsze z kimś z zespołu, drugie z Managerem).
Aktualnie poszukujemy profilu na stanowisko: Senior Data Quality Engineer
Informacje organizacyjne:
•
Tryb pracy: zdalny
• Projekt: Dołącz do nowo powstającego zespołu odpowiedzialnego za budowę i rozwój centralnej platformy Monitoring & Observability (M&O) oraz Data Quality dla globalnej organizacji. Projekt koncentruje się na zapewnieniu wysokiej jakości danych, niezawodności procesów danych oraz monitoringu platform i aplikacji działających w środowisku enterprise.
• Technologie na projekcie: SQL, Python, Databricks, Fivetran, SAP, Power BI, Grafana, Azure, Azure SQL, Kafka, Apache Flink, GitHub, GitHub Actions, CI/CD, Cloud Technologies.
•
Zakres prac:
• Projektowanie, implementacja i rozwój reguł kontroli jakości danych (Data Quality Rules).
• Budowa i rozwój Data Quality Engine wspierającego walidację danych w procesach ETL/ELT.
• Monitorowanie jakości danych w pipeline'ach oraz identyfikacja anomalii i problemów jakościowych.
• Definiowanie oraz mierzenie kluczowych wymiarów jakości danych:
Accuracy,
• Completeness,
• Consistency,
• Timeliness,
• Validity,
• Uniqueness.
• Analiza przyczyn źródłowych problemów związanych z jakością danych (Root Cause Analysis).
• Tworzenie rozwiązań automatyzujących procesy kontroli jakości danych.
• Raportowanie, wizualizacja oraz prezentacja wyników monitoringu Data Quality.
• Współpraca z zespołami Data Engineering, Business oraz właścicielami źródeł danych.
• Wdrażanie najlepszych praktyk związanych z jakością danych oraz ciągłe doskonalenie istniejących mechanizmów monitoringu.
Oczekiwania:
• Minimum kilkuletnie doświadczenie w obszarze Data Quality, Data Validation lub Data Profiling.
• Praktyczna znajomość metodologii oraz wymiarów jakości danych.
• Doświadczenie w projektowaniu i wdrażaniu reguł walidacyjnych oraz kontroli jakości danych.
• Bardzo dobra znajomość SQL wykorzystywanego do analizy i walidacji danych.
• Doświadczenie w tworzeniu rozwiązań automatyzujących procesy Data Quality z wykorzystaniem Python.Dobra znajomość procesów ETL/ELT oraz architektury data pipeline’ów.
• Doświadczenie w pracy z platformą Databricks.
• Umiejętność identyfikowania i analizowania przyczyn źródłowych problemów jakości danych.
• Doświadczenie w pracy z dużymi wolumenami danych oraz wieloma źródłami danych.
Mile widziane:
• Doświadczenie z Fivetran.Znajomość danych i integracji z systemami SAP.
• Doświadczenie w budowie dashboardów i raportów w Power BI lub Grafanie.
• Znajomość Azure oraz Azure SQL.
• Doświadczenie z Kafka lub Apache Flink.
• Znajomość procesów CI/CD.
• Doświadczenie pracy z dużymi platformami danych w środowiskach enterprise
Oferujemy:
• Długofalowe stabilne zatrudnienie w oparciu o kontrakt B2B.
• Szansa na rozwój w dużej strukturze, bezpośredni kontakt z Managerem zespołu.
• Praca w firmie, w której IT jest dojrzałe i globalne, a metodyki zwinne są respektowane.
• Dopłata do karty MultiSport oraz ubezpieczenia.
• Godziny startu pracy 7:30 - 9:30.
• Sprawny proces rekrutacyjny (wideokonferencja), maksymalnie 2 spotkania online (pierwsze z kimś z zespołu, drugie z Managerem).
🔍 Dekoder Ogłoszenia
🔴
Dołącz do nowo powstającego zespołu odpowiedzialnego za budowę i rozwój centralnej platformy Monitoring & Observability (M&O) oraz Data Quality dla globalnej organizacji.
Będziesz jednym z pierwszych członków zespołu, co może oznaczać duży wpływ, ale też brak ugruntowanych procesów i potencjalne wyzwania związane z budowaniem wszystkiego od podstaw.
🟡
zapewniamy doświadczone osoby eksperckie, które pomagają przyspieszać cyfrową transformację.
Firma może polegać na zewnętrznych konsultantach lub bardziej doświadczonych pracownikach, co może sugerować, że nie zawsze mają wewnętrzne zasoby do samodzielnego rozwiązywania problemów.
🔴
z nastawieniem na wyzwania, ciekawość technologii i zwinność współtworzymy wyjątkowe rozwiązania IT
Może oznaczać, że będziesz musiał radzić sobie z nieprzewidzianymi problemami i szybko adaptować się do zmian, a także pracować nad innowacyjnymi, ale potencjalnie niestabilnymi rozwiązaniami.
🟡
Projekt koncentruje się na zapewnieniu wysokiej jakości danych, niezawodności procesów danych oraz monitoringu platform i aplikacji działających w środowisku enterprise.
Oczekuje się, że będziesz odpowiedzialny za krytyczne aspekty infrastruktury, co może wiązać się z dużą presją i odpowiedzialnością za stabilność systemu.