Cloudera Solution Architect (AWS) [M/F]
⚲ Remote
33 600 - 39 480 PLN (B2B)
Wymagania
- AWS
- Cloudera
Opis stanowiska
O projekcie:
Projekt realizowany jest dla międzynarodowej instytucji finansowej i koncentruje się na rozwoju nowoczesnej platformy danych opartej o Cloudera CDP w środowisku AWS. Celem projektu jest projektowanie oraz rozwój skalowalnych rozwiązań Data Lake i Operational Data Store, wspierających przetwarzanie dużych wolumenów danych oraz procesy analityczne i biznesowe. Zespół pracuje w środowisku Agile, wykorzystując nowoczesne technologie Big Data oraz rozwiązania chmurowe do budowy bezpiecznej i wydajnej architektury danych.
Wymagania:
- min. 7 lat doświadczenia w projektach związanych z architekturą danych oraz rozwiązaniami chmurowymi,- bardzo dobra znajomość platform Cloudera CDH/CDP (On-Premise oraz Cloud),- doświadczenie w projektowaniu rozwiązań opartych o AWS,- praktyczna znajomość technologii Big Data, w szczególności: Apache Spark, Kafka, Cassandra, HBase,- doświadczenie w budowie procesów ETL oraz Data Pipeline z wykorzystaniem narzędzi takich jak Apache Airflow, Apache NiFi,- zaawansowana znajomość j. angielskiego,- dobra znajomość zasad architektury danych oraz nowoczesnych praktyk inżynierskich.
Codzienne zadania:
- projektowanie kompleksowych rozwiązań Data Lake oraz Operational Data Store (ODS) opartych o Cloudera na AWS,
- tworzenie architektury rozwiązań dla dużych, rozproszonych środowisk danych,
- odpowiedzialność za projektowanie rozwiązań end-to-end zgodnie z wymaganiami biznesowymi oraz standardami architektonicznymi,
- współpraca z interesariuszami biznesowymi oraz zespołami technicznymi przy doprecyzowywaniu wymagań,
- weryfikacja projektów przygotowywanych przez innych architektów i zespoły techniczne,
- definiowanie najlepszych praktyk w zakresie architektury danych oraz wspieranie ich wdrażania,
- wsparcie procesu estymacji oraz identyfikacja ryzyk technicznych,
- nadzór nad zgodnością rozwiązań z architekturą korporacyjną,
- współpraca z zespołami odpowiedzialnymi za development, integrację, testy i wdrożenia.
Projekt realizowany jest dla międzynarodowej instytucji finansowej i koncentruje się na rozwoju nowoczesnej platformy danych opartej o Cloudera CDP w środowisku AWS. Celem projektu jest projektowanie oraz rozwój skalowalnych rozwiązań Data Lake i Operational Data Store, wspierających przetwarzanie dużych wolumenów danych oraz procesy analityczne i biznesowe. Zespół pracuje w środowisku Agile, wykorzystując nowoczesne technologie Big Data oraz rozwiązania chmurowe do budowy bezpiecznej i wydajnej architektury danych.
Wymagania:
- min. 7 lat doświadczenia w projektach związanych z architekturą danych oraz rozwiązaniami chmurowymi,- bardzo dobra znajomość platform Cloudera CDH/CDP (On-Premise oraz Cloud),- doświadczenie w projektowaniu rozwiązań opartych o AWS,- praktyczna znajomość technologii Big Data, w szczególności: Apache Spark, Kafka, Cassandra, HBase,- doświadczenie w budowie procesów ETL oraz Data Pipeline z wykorzystaniem narzędzi takich jak Apache Airflow, Apache NiFi,- zaawansowana znajomość j. angielskiego,- dobra znajomość zasad architektury danych oraz nowoczesnych praktyk inżynierskich.
Codzienne zadania:
- projektowanie kompleksowych rozwiązań Data Lake oraz Operational Data Store (ODS) opartych o Cloudera na AWS,
- tworzenie architektury rozwiązań dla dużych, rozproszonych środowisk danych,
- odpowiedzialność za projektowanie rozwiązań end-to-end zgodnie z wymaganiami biznesowymi oraz standardami architektonicznymi,
- współpraca z interesariuszami biznesowymi oraz zespołami technicznymi przy doprecyzowywaniu wymagań,
- weryfikacja projektów przygotowywanych przez innych architektów i zespoły techniczne,
- definiowanie najlepszych praktyk w zakresie architektury danych oraz wspieranie ich wdrażania,
- wsparcie procesu estymacji oraz identyfikacja ryzyk technicznych,
- nadzór nad zgodnością rozwiązań z architekturą korporacyjną,
- współpraca z zespołami odpowiedzialnymi za development, integrację, testy i wdrożenia.
🔍 Dekoder Ogłoszenia
🔴
rozwój nowoczesnej platformy danych
Prawdopodobnie chodzi o budowę od podstaw lub znaczącą przebudowę istniejącej infrastruktury danych.
🔴
wspierających przetwarzanie dużych wolumenów danych oraz procesy analityczne i biznesowe
Może oznaczać, że będziesz musiał radzić sobie z problemami wydajnościowymi i optymalizacją przy bardzo dużych zbiorach danych.
🔴
wykorzystując nowoczesne technologie Big Data oraz rozwiązania chmurowe
Oczekuje się biegłości w wielu zaawansowanych technologiach, a nie tylko w podstawach.
🔴
odpowiedzialność za projektowanie rozwiązań end-to-end
Oznacza to, że będziesz musiał brać pod uwagę cały cykl życia rozwiązania, od koncepcji po wdrożenie i utrzymanie.
🟡
współpraca z interesariuszami
Może oznaczać konieczność tłumaczenia skomplikowanych zagadnień technicznych na język zrozumiały dla osób nietechnicznych.