Data Engineer (DBT / Snowflake / AI)
⚲ Gdańsk
Wymagania
- Snowpark
- Snowflake
- SQL
- DBT
- Airflow
- Jenkins
- Bitbucket
Opis stanowiska
Poszukujemy osoby na stanowisko Data Engineer do projektu z obszaru nowoczesnych platform danych i transformacji środowiska legacy do rozwiązań chmurowych. Osoba na tym stanowisku będzie odpowiadać za rozwój i optymalizację pipeline’ów danych oraz współpracę przy rozwoju środowiska data warehouse i automatyzacji procesów. Zakres obowiązków: • Projektowanie, rozwój i optymalizacja pipeline’ów danych • Tworzenie oraz rozwój workflowów w DBT i Snowpark • Rozwój oraz utrzymanie procesów CI/CD • Monitorowanie i optymalizacja procesów przetwarzania danych • Współpraca z zespołami technologicznymi i biznesowymi • Wspieranie rozwoju środowiska data platform oraz narzędzi automatyzacyjnych • Udział w migracji rozwiązań legacy do nowoczesnych technologii chmurowych Wymagania: • Bardzo dobra znajomość SQL • Doświadczenie w pracy z DBT • Doświadczenie z hurtowniami danych oraz procesami ETL/ELT • Znajomość Snowflake oraz Snowpark lub podobnych technologii chmurowych • Doświadczenie z narzędziami CI/CD • Znajomość Airflow • Umiejętność pracy w środowisku międzynarodowym • Komunikatywna znajomość języka angielskiego Mile widziane: • Znajomość PySpark • Podstawowa wiedza z zakresu AI Agentów • Doświadczenie w projektach związanych z dużymi wolumenami danych