Pracuj.pl Hybrydowo Mid

Data Engineer

ING Hubs Poland

⚲ Warszawa, Wola

Wymagania

  • SQL
  • Python
  • Java
  • GCP
  • BigQuery
  • Dataflow
  • Cloud Composer
  • AWS
  • Azure
  • CI/CD tools
  • Azure DevOps
  • Git
  • Maven
  • Terraform
  • DBT
  • Looker
  • Apache Beam
  • Spark
  • Flink
  • Kafka

Opis stanowiska

Nasze wymagania: You have strong SQL and database expertise. You are experienced with Python or Java. You have experience with GCP (BigQuery, Dataflow, Cloud Composer) or other public cloud providers equivalents (AWS, Azure). You know CI/CD tools (Azure DevOps, Git, Maven), Automated Testing, and Infrastructure as Code (e.g., Terraform). You are analytical and proactive. Know English on advanced level. Mile widziane: DBT, Looker, data governance. Experience with Apache Beam, Spark, Flink, or Kafka. Zakres obowiązków: Design, develop, and optimize cloud-based data pipelines. Automate testing and ensure security, stability, and performance. Work with structured and unstructured data across cloud and on-prem environments. Contribute to architecture decisions and best practices. Collaborate with teams to deliver high-quality, efficient solutions.

🔍 Dekoder Ogłoszenia

🔴
Contribute to architecture decisions and best practices.
Twoje pomysły na architekturę będą brane pod uwagę, ale ostateczne decyzje podejmie ktoś inny.
🔴
You are analytical and proactive.
Oczekuje się, że będziesz samodzielnie identyfikować problemy i proponować rozwiązania, często bez wyraźnych wskazówek.
🔴
Automate testing and ensure security, stability, and performance.
Będziesz odpowiedzialny za zapewnienie tych aspektów, co może oznaczać dużo pracy przy utrzymaniu i debugowaniu istniejących systemów.
🔴
Work with structured and unstructured data across cloud and on-prem environments.
Przygotuj się na pracę z różnorodnymi, często nieuporządkowanymi danymi i potencjalnie przestarzałą infrastrukturą on-premise.
🔴
Design, develop, and optimize cloud-based data pipelines.
Obejmuje to zarówno tworzenie nowych rozwiązań, jak i naprawianie i usprawnianie istniejących, które mogą być w złym stanie.