Pracuj.pl Stacjonarnie Mid New

Cloud Data Engineer (f/m/x)

Sii Sp. z o.o.

⚲ Białystok, Centrum, Bydgoszcz, Częstochowa, Śródmieście, Gdańsk, Oliwa, Gliwice, Katowice, Kielce, Kraków, Podgórze, Lublin, Łódź, Śródmieście, Piła, Poznań, Wilda, Rzeszów, Szczecin, Toruń, Warszawa, Mokotów, Wrocław, Fabryczna

Wymagania

  • Python
  • SQL
  • Apache Spark
  • ETL/ELT
  • Azure/AWS
  • Snowflake
  • Apache Kafka
  • Apache Airflow

Opis stanowiska

Nasze wymagania: Minimum 4 lata doświadczenia w projektach związanych z przetwarzaniem i integracją dużych wolumenów danych Bardzo dobra znajomość SQL oraz Python Doświadczenie w pracy z frameworkami do przetwarzania danych takimi jak Apache Spark / PySpark Praktyczne doświadczenie w projektowaniu i budowie rozwiązań Data Lake oraz Data Warehouse Umiejętność budowania i utrzymywania pipeline’ów ETL/ELT oraz pracy z narzędziami do orkiestracji i integracji danych Komercyjne doświadczenie w projektach opartych o rozwiązania chmurowe Microsoft Azure i/lub AWS w obszarze przetwarzania danych (np. Databricks, AWS Glue, EMR, Azure Data Factory, Synapse) Znajomość koncepcji przetwarzania danych w środowisku rozproszonym oraz optymalizacji pipeline’ów danych Umiejętność swobodnej komunikacji w języku angielskim Wymagana płynna znajomość języka polskiego Wymagane przebywanie na terenie Polski Mile widziane: Doświadczenie w projektach związanych z migracją danych z on-premise do chmury (bazy danych: Oracle, PostgreSQL, MS SQL) O projekcie: Chcesz rozwijać swoje kompetencje w technologiach chmurowych? Dołącz do naszej wyspecjalizowanej jednostki skupiającej ekspertów z dziedziny procesowania i analizy danych w ramach Centrum Kompetencyjnego Data & Analytics. Oferujemy również rozwój w obszarach Data Science, Big Data i Machine Learning. Zakres obowiązków: Projektowanie, budowanie i rozwijanie skalowalnych oraz wysokowydajnych platform przetwarzania danych w architekturze Data Lake / Data Platform Tworzenie oraz utrzymanie pipeline’ów ETL/ELT do integracji danych z różnych źródeł oraz ich przetwarzania w środowiskach chmurowych (Azure lub AWS) Modelowanie danych oraz przygotowywanie struktur danych dostosowanych do potrzeb analitycznych i biznesowych Implementacja rozwiązań do przetwarzania danych (batch i/lub near real-time) Monitorowanie, optymalizacja i rozwój istniejących pipeline’ów oraz procesów przetwarzania danych Współpraca z analitykami danych, zespołami BI oraz Data Science w zakresie przygotowania i udostępniania danych Zbieranie wymagań biznesowych oraz proponowanie optymalnych rozwiązań technologicznych Tworzenie i utrzymywanie dokumentacji technicznej dla rozwijanych rozwiązań Wsparcie oraz mentoring mniej doświadczonych członków zespołu, dzielenie się wiedzą i najlepszymi praktykami Oferujemy: Tytuł Great Place to Work od 2015 roku - to dzięki opiniom pracowników otrzymujemy tytuł i wdrażamy nowe pomysły Stabilność zatrudnienia – 2,1 MLD PLN przychodu, brak długów, od 2006 roku na rynku Dzielimy się zyskiem z pracownikami - od 2022 roku przeznaczyliśmy na ten cel już ponad 76 milionów PLN Bogaty pakiet benefitów - prywatna opieka zdrowotna, platforma kafeteryjna, zniżki na samochody i więcej Komfortowe miejsce pracy - pracuj w naszych biurach klasy A lub zdalnie Dziesiątki fascynujących projektów dla prestiżowych marek z całego świata – możesz je zmieniać dzięki aplikacji Job Changer 1 000 000 PLN rocznie na Twoje pomysły - taką kwotą wspieramy pasje i akcje wolontariackie naszych pracowników Stawiamy na Twój rozwój - meetupy, webinary, platforma szkoleniowa i blog technologiczny – Ty wybierasz Fantastyczna atmosfera stworzona przez wszystkich Sii Power People