Senior Data Engineer
Lumicode Sp. z o.o. (Pentacomp Group)
⚲ Warszawa
22 680 - 24 360 PLN netto (B2B)
Wymagania
- praktyczna znajomość Apache Spark, Python i SQL
- doświadczenie z Azure Databricks, Azure Data Factory i Azure Data Lake
- znajomość Azure Synapse Analytics oraz Azure Data Explorer
- doświadczenie w projektowaniu i optymalizacji procesów ETL/ELT
- znajomość architektury Data Lakehouse i rozwiązań Databricks
- praktyczna znajomość Delta Live Tables (DLT) i Unity Catalog
- doświadczenie w implementacji CI/CD z Azure DevOps
- zdolność współpracy z zespołami technicznymi i biznesowymi
Opis stanowiska
Dołączysz do międzynarodowego projektu dla firmy organizującej rejsy i wyprawy ekspedycyjne, gdzie rozwiniesz i zmodernizujesz platformę danych opartą na Azure Databricks i architekturze Lakehouse. Realnie zajmiesz się projektowaniem i optymalizacją ETL/ELT, pipeline'ami, migracjami technologicznymi i wdrażaniem Unity Catalog, a także utrzymaniem środowiska produkcyjnego. Uwaga: to projekt w fazie intensywnych zmian, a część odpowiedzialności to reagowanie na problemy produkcyjne — warto to uwzględnić, jeśli szukasz stabilnego, niezmiennego środowiska. Oferta dla doświadczonych inżynierów danych, którzy dobrze czują się w środowisku Microsoft Azure i lubią pracę w rozproszonym, wielokulturowym zespole.
🔍 Dekoder Ogłoszenia
🔴
Dołączysz do międzynarodowego projektu
Może oznaczać pracę z ludźmi z różnych stref czasowych i kultur, co wymaga dodatkowej komunikacji i elastyczności.
🔴
realizowanego dla firmy z branży turystycznej, specjalizującej się w organizacji rejsów rzecznych, morskich i oceanicznych oraz wypraw ekspedycyjnych.
Branża turystyczna może być sezonowa i podatna na czynniki zewnętrzne (np. pandemie), co może wpływać na stabilność projektu lub priorytety biznesowe.
🔴
koncentruje się na rozwoju i modernizacji platformy danych
Może oznaczać, że projekt jest w fazie intensywnych zmian, co wymaga adaptacji do nowych rozwiązań i potencjalnie rozwiązywania problemów związanych z migracją.
🔴
Umiejętność optymalizacji wydajności, zapewniania jakości danych oraz rozwiązywania problemów w środowiskach produkcyjnych.
Oznacza, że będziesz odpowiedzialny za utrzymanie i naprawę działającego systemu, co może być stresujące i wymagać szybkiego reagowania.
🟡
Zdolność do współpracy z zespo
Jest to standardowe wymaganie, ale w kontekście międzynarodowego projektu może oznaczać konieczność pracy z różnymi zespołami i w różnych stylach komunikacji.