Senior Data Engineer
Polski Standard Płatności S.A.
⚲ Warszawa, Mokotów
Wymagania
- Python
- Go
- SQL
Opis stanowiska
Nasze wymagania: Minimum 6 lat komercyjnego doświadczenia w programowaniu w języku Python lub Go Doświadczenie w pracy z co najmniej jednym z narzędzi: Apache Airflow, Spark, Beam, NiFi, Flink Biegłość w SQL (PostgreSQL) i NoSQL - key-value, dokumentowe, time-series oraz kolumnowe DWH Pisanie kodu wg zasad Clean Code (np. "Meaningful Variable and Function Names", "Keep Functions and Methods Short.) Doświadczenie z silnikami kolejek Znajomość powszechnie stosowanych formatów, algorytmów i struktur danych Mile widziane: Doświadczenie w pracy w chmurach publicznych (wykorzystujemy Google Cloud, natomiast jeśli znasz dobrze inną - na pewno dojdziemy do porozumienia) Znajomość technologii CI/CD oraz IaC (Terraform, Ansible) O projekcie: Szukamy samodzielnych seniorów, którzy chcą mieć realny wpływ, a nie tylko "dowodzić tickety". Pracujemy w modelu "wolno, drogo, ale dobrze". Budujemy platformę danych od zera, kształtujemy kulturę data-driven w całej organizacji i decydujemy, jak będzie wyglądał ekosystem danych na najbliższe lata. Pracujemy na nowoczesnym stacku opartym o Google Cloud, BigQuery, Python. Przetwarzamy miliardy eventów, a przy tym dbamy, żeby była przestrzeń na eksperymenty, dyskusje architektoniczne i zwykłą radość z rozwiązywania trudnych problemów (i czytanie whitepaperów o algorytmach i strukturach danych). Projekt nie ma "daty końca", a większość przed nami. Jesteśmy nowym, autonomicznym zespołem w BLIKu i naprawdę interesujemy się tym, co robimy i jak to działa kilka poziomów abstrakcji pod spodem. Techniczne wyzwania i sensowny wpływ na biznes - to jest dokładnie to miejsce. Zakres obowiązków: Praca przy tworzeniu globalnej platformy analitycznej w firmie, z myślą o skalowalności i kosztach. Projektowanie i rozwój data pipeline'ów (batch, streaming). Tworzenie i utrzymywanie kontraktów danych, testów i metryk jakości (freshness, completeness, accuracy). Projektowanie algorytmów (deduplikacja, windowing, segmentacja) i struktur danych zoptymalizowanych dla tysięcy eventów na sekundę. Zbieranie, analiza i synteza wymagań od zespołów produktowych, analityków i Data Science. Propagowanie kultury data-driven w organizacji. Tworzenie dokumentacji oraz proponowanie nowych rozwiązań i kierunków dalszego rozwoju. Oferujemy: Możliwość pracy nad kluczowym systemem płatniczym w Polsce, mającym realny wpływ na codzienne życie milionów użytkowników Autonomię w podejmowaniu decyzji technicznych i możliwość wprowadzania innowacyjnych rozwiązań Pracę w środowisku, które ceni wiedzę ekspercką, argumenty merytoryczne i wspiera kulturę ciągłego uczenia się Elastyczne godziny pracy, praca hybrydowa Pakiet standardowych benefitów (zawierający m.in. opiekę medyczną, ubezpieczenie na życie, naukę języka angielskiego, nieograniczony dostęp do dużej platformy e-learningowej, MyBenefit) Budżet szkoleniowy i konferencyjny