Pracuj.pl Stacjonarnie Mid

Data Engineer

IN4GE sp. z o.o.

⚲ Kraków, Warszawa, Wrocław

140–180 zł netto (+ VAT) / godz.

Wymagania

  • AWS
  • Google Cloud Platform
  • Microsoft Azure
  • Apache Spark
  • Kafka
  • Hadoop
  • PostgreSQL
  • MySQL
  • MongoDB
  • Cassandra
  • Airflow
  • Azure Databricks
  • Spark
  • PySpark
  • SQL
  • Prometheus
  • Grafana

Opis stanowiska

Nasze wymagania: Minimum 3 lata doświadczenia w obszarze Data Engineering. Znajomość co najmniej jednej platformy chmurowej: AWS, GCP lub Azure. Doświadczenie w pracy z rozwiązaniami big data, takimi jak Apache Spark, Kafka lub Hadoop. Umiejętność pracy z relacyjnymi bazami danych (np. PostgreSQL, MySQL) oraz bazami NoSQL (np. MongoDB, Cassandra). Praktyczna znajomość narzędzi ETL/ELT, np. Airflow lub dbt. Mile widziane: Certyfikaty z obszaru technologii chmurowych. Znajomość Azure Databricks, Spark oraz PySpark. Doświadczenie w modelowaniu danych i optymalizacji zapytań SQL. Znajomość narzędzi monitorujących, takich jak Prometheus i Grafana. Zrozumienie zasad CI/CD oraz praktyczne doświadczenie z narzędziami DevOps. O projekcie: Poszukujemy doświadczonej osoby na stanowisko Data Engineer do współpracy przy tworzeniu i rozwijaniu nowoczesnych rozwiązań przetwarzania danych dla naszych klientów. To rola dla osoby, która dobrze odnajduje się w środowisku projektowym i chce mieć realny wpływ na projektowanie oraz wdrażanie skalowalnych systemów danych. Na tym stanowisku będziesz współpracować z zespołami Data Science, Analityki oraz IT, wspierając rozwój rozwiązań opartych na danych. Zakres obowiązków: Projektowanie, rozwój i utrzymanie hurtowni danych, pipeline’ów ETL/ELT oraz systemów przetwarzania dużych zbiorów danych. Optymalizacja wydajności procesów przetwarzania danych. Tworzenie i rozwój infrastruktury danych w środowiskach chmurowych (AWS, GCP, Azure) lub on-premise. Współpraca z zespołami analitycznymi i biznesowymi w celu zbierania wymagań oraz identyfikacji potrzeb. Wdrażanie rozwiązań wspierających jakość danych oraz bezpieczeństwo danych. Oferujemy: Współpracę w modelu B2B. Możliwość udziału w międzynarodowych projektach. Ambitne i rozwojowe środowisko projektowe. Wsparcie merytoryczne na każdym etapie wdrożenia. Dostęp do nowoczesnych technologii i narzędzi. Model współpracy hybrydowy lub stacjonarny w jednej z lokalizacji: Kraków, Wrocław, Warszawa.