Data Engineer (AWS)
⚲ Gdańsk, Oliwa, Kraków, Grzegórzki, Poznań, Grunwald, Warszawa, Włochy, Wrocław, Fabryczna
Do uzgodnienia
Wymagania
- udokumentowane doświadczenie w projektach Big Data lub Cloud obejmujących przetwarzanie i wizualizację dużych, nieustrukturyzowanych zbiorów danych na różnych etapach SDLC
- praktyczne doświadczenie z chmurą AWS (Storage, Compute/Serverless, Networking, usługi DevOps)
- solidna znajomość usług AWS, najlepiej potwierdzona certyfikatami
- znajomość kilku z technologii: Glue, Redshift, Lambda, Athena, S3, Snowflake, Docker, Terraform, CloudFormation, Kafka, Airflow, Spark
- podstawowa biegłość w co najmniej jednym języku: Python, Scala, Java lub Bash
- bardzo dobra znajomość angielskiego
Mile widziane
- znajomość niemieckiego
- doświadczenie z narzędziami orkiestracji (np. Airflow, Prefect), CI/CD, technologiami streamingowymi (Kafka, Spark Streaming), Snowflake lub Databricks w środowisku produkcyjnym oraz certyfikaty AWS/data engineering/big data
Opis stanowiska
Dołączysz do zespołu Insights & Data w Capgemini (ponad 400 specjalistów), gdzie będziesz projektować i wdrażać rozwiązania do przetwarzania danych w architekturach Data Mesh, Data Lake i Streaming na platformie AWS. Praca obejmuje budowę i optymalizację nowoczesnych rozwiązań DWH/Big Data w środowiskach CI/CD oraz wsparcie migracji z systemów on-premises do chmury. To oferta dla inżyniera danych, który samodzielnie prowadził projekty przez cały cykl SDLC, a nie tylko uczestniczył w ich fragmentach. Uwaga: choć wymieniono wiele usług AWS, realne oczekiwania mogą dotyczyć tylko kilku kluczowych — warto dopytać o konkretny zakres.
🔍 Dekoder Ogłoszenia
🔴
Proven experience in Big Data or Cloud projects involving processing and visualization of large and unstructured datasets, across various phases of the SDLC.
Oczekuje się, że kandydat samodzielnie realizował projekty od początku do końca, a nie tylko uczestniczył w ich fragmentach.
🔴
Hands-on experience with the AWS cloud, including Storage, Compute (and Serverless), Networking, and DevOps services.
Chociaż wymieniono wiele usług, rzeczywiste doświadczenie może być ograniczone do kilku kluczowych, a nie wszystkich.
🟡
Solid understanding of AWS services, ideally supported by relevant certifications.
Posiadanie certyfikatów jest preferowane, ale brak certyfikatu niekoniecznie dyskwalifikuje, jeśli wiedza jest udokumentowana doświadczeniem.
🟡
Familiarity with several of the following technologies: Glue, Redshift, Lambda, Athena, S3, Snowflake, Docker, Terraform, CloudFormation, Kafka, Airflow, Spark.
Nie trzeba znać wszystkich wymienionych technologii, ale posiadanie wiedzy o kilku z nich jest kluczowe.
🟡
Basic proficiency in at least one of the following programming languages: Python, Scala, Java, or Bash.
Oczekiwana jest podstawowa znajomość języka programowania, co może oznaczać, że nie będzie się on głównym narzędziem pracy.