NoFluffJobs Stacjonarnie Senior

Hadoop / Big Data Developer (she / he)

ASTEK Polska

⚲ Warszawa, Gdynia, Gdańsk, Łódź

21 000 - 23 520 PLN (B2B)

Wymagania

  • Java
  • Scala
  • Spark
  • Linux
  • Shell
  • SQL
  • Hadoop
  • Yarn
  • Hive
  • CD tools
  • Ansible
  • Bamboo
  • Functional programming (nice to have)
  • Flink (nice to have)
  • Kafka (nice to have)
  • Data analysis (nice to have)

Opis stanowiska

O projekcie: Nr ref: AO211721 Wymagania: Requirements: - 3+ years of Java 8+ and/or Scala experience - Experience in working in Spark - Knowledge of Linux Shell Scripting - Knowledge of SQL - Knowledge of Hadoop stack (YARN, Sqoop, Hive, Impala, MapReduce Oozie, etc) - Familiar with version control and CI/CD tools (Git, Ansible, Bamboo, Jenkins...) Nice-to-have skills: - Experience with functional programming techniques & principles – Scala - Experience with Streaming Technologies, such as Flink and Kafka - Familiar with Data Analysis -  Familiar with SAFe Agile way of working Codzienne zadania: - Design, develop, and maintain scalable Big Data solutions using Hadoop ecosystem technologies - Build and optimize data pipelines - Develop high‑quality, efficient, and reusable code using technologies such as Java, SQL, Hive, Spark, and related tools - Work closely with business stakeholders and product owners - Participate actively in SAFe ceremonies, including PI planning, sprint planning, daily stand‑ups, reviews, and retrospectives - Optimize existing Big Data processes and queries for performance and cost efficiency - Collaborate with cross‑functional teams (developers, architects, QA, DevOps) to deliver end‑to‑end solutions - Support deployment, monitoring, and troubleshooting of Big Data applications in production environments

🔍 Dekoder Ogłoszenia

🔴
Design, develop, and maintain scalable Big Data solutions using Hadoop ecosystem technologies
Może oznaczać zarówno budowanie nowych, jak i utrzymywanie istniejących, często starszych i mniej optymalnych rozwiązań.
🔴
Work closely with business stakeholders and product owners
Może oznaczać konieczność częstego tłumaczenia technicznych kwestii na język biznesu i zarządzania oczekiwaniami, które mogą być nierealistyczne.
🔴
Optimize existing Big Data processes and queries for performance and cost efficiency
Może sugerować, że obecne procesy są nieoptymalne i wymagają znaczących nakładów pracy naprawczej, a nie tylko drobnych usprawnień.
🔴
Collaborate with cross‑functional teams (developers, architects, QA, DevOps) to deliver end‑to‑end solutions
Wskazuje na dużą zależność od innych zespołów, co może prowadzić do opóźnień w projekcie z powodu problemów po stronie innych działów.
🔴
Support deployment, monitoring, and troubleshooting of Big Data applications in production environments
Oznacza potencjalną konieczność pracy w trybie dyżuru lub reagowania na incydenty poza standardowymi godzinami pracy.