Expert Data Engineer (IT Developer)

Nasze wymagania: Bardzo dobra znajomość: Scala, Apache Spark Doświadczenie w pracy z: Python Znajomość ekosystemu Hadoop: YARN, EMR, Sqoop, Hive, Oozie Bardzo dobra znajomość: SQL Praktyczne doświadczenie z systemami Linux Doświadczenie w pracy z chmurą: AWS Znajomość języka angielskiego umożliwiająca pracę w środowisku międzynarodowym Mile widziane: Doświadczenie w migracji danych z on-premise do chmury Praca w środowisku Agile / SAFe Doświadczenie z dużymi wolumenami danych i systemami czasu zbliżonego do rzeczywistego O projekcie: Dołączysz do zespołu rozwijającego centralną platformę danych w dużej organizacji. Projekt obejmuje: • Budowę i rozwój rozproszonych systemów przetwarzania danych (Big Data) • Migrację rozwiązań do chmury publicznej (AWS) • Tworzenie komponentów wspierających zaawansowaną analitykę i wizualizację danych • Pracę w metodyce SAFe z cyklicznymi PI Planning Informacje organizacyjne • Forma pracy: hybrydowa (1 dzień w tygodniu w biurze) • Lokalizacje biura: Trójmiasto / Warszawa / Łódź Zakres obowiązków: Projektowanie i budowa wysoko wydajnych, rozproszonych pipeline’ów Big Data Przetwarzanie, transformacja i wzbogacanie dużych zbiorów danych z wykorzystaniem Apache Spark Tworzenie rozwiązań wspierających analitykę danych, raportowanie i procesy decyzyjne Współpraca z zespołami analitycznymi oraz biznesem przy budowie modeli danych Utrzymanie i rozwój rozwiązań opartych o Hadoop i technologie Big Data Automatyzacja procesów przetwarzania danych Ścisła współpraca z zespołem QA i innymi zespołami technicznymi Oferujemy: Udział w projektach o dużej skali i realnym wpływie na biznes Pracę z nowoczesnym stackiem technologicznym (Scala, Spark, Python, AWS, Hadoop) Możliwość udziału w transformacji chmurowej dużej organizacji Elastyczny model pracy hybrydowej (ok. 1 dzień w tygodniu w biurze) Okazjonalne spotkania zespołowe w Trójmieście (PI Planning)