Big Data Developer (PySpark / Spark / Hadoop)

Nasze wymagania: Masz min. 4 lata doświadczenia jako Big Data Developer Pracujesz ze Spark (PySpark lub Scala) od co najmniej 3 lat Bardzo dobrze znasz SQL i swobodnie operujesz na dużych zbiorach danych Masz doświadczenie w pracy z Hadoop (Cloudera / Hortonworks) Pracowałeś/aś z formatami danych: JSON, Parquet, ORC, Avro Dobrze rozumiesz ekosystem Hadoop (Hive, HBase, Kudu lub podobne rozwiązania) Masz doświadczenie w integracji danych z wielu źródeł Posiadasz wykształcenie wyższe kierunkowe (IT lub pokrewne) Mile widziane: Pracowałeś/aś z chmurą (GCP lub Azure) Masz doświadczenie ze streamingiem (np. Kafka, Spark Streaming) Pracujesz w metodykach Agile (Scrum, Kanban, Jira, Confluence) O projekcie: W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Jesteśmy firmą, która wykorzystuje szerokie spektrum usług IT, żeby pomagać klientom. Obszary naszego działania to m.in.: doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły developerskie. Cześć! U nas znajdziesz to, czego szukasz - przekonaj się! Zakres obowiązków: Projektowanie i rozwój systemów przetwarzania danych w środowisku Big Data Tworzenie i rozwijanie procesów ETL/ELT w oparciu o Spark (PySpark) Praca z dużymi wolumenami danych (Hadoop ecosystem) Integracja danych z wielu źródełUdział w migracji rozwiązań do chmury (GCP) Dbanie o jakość kodu, dokumentację oraz procesy wdrożeniowe Współpraca z zespołami developerskimi i architektonicznymi Udział w inicjatywach R&D Model pracy: hybrydowy - Warszawa (2 dni w biurze w miesiącu) Stawka: do 155 zł netto + VAT/H/B2B Oferujemy: stabilną współpracę i różnorodne projekty (Software, Embedded, Data, Cloud Services), możliwość rozwoju kompetencji jako Ambasador Scalo - doskonal skille techniczne i presalesowe w społeczności naszych ekspertów, wpływaj na rozwój organizacji, wspieraj innych, przestrzeń do budowania marki osobistej - twórz wartościowe treści, dziel się wiedzą i doświadczeniem, występuj jako prelegent na wydarzeniach (np. ProMeet), prywatną opiekę medyczną - Luxmed, kafeteryjny system benefitów - Motivizer, dostęp do karty Multisport, program poleceń pracowniczych z nagrodami, integracje i wydarzenia firmowe.