Palantir Data Engineer

Nasze wymagania: Praktyczne doświadczenie z Palantir Foundry – najlepiej w realizacji use case’ów end-to-end (od danych do rozwiązania / aplikacji). Znajomość kluczowych komponentów Foundry: Data Lineage, Data Connection. Pipeline Builder, Code Repositories. Ontology (object types / properties / links). Action types, Functions. Workshop, Quiver / Contour. Bardzo dobre przygotowanie w obszarze data engineering i/lub data science (rozumienie przetwarzania danych, jakości danych oraz pipeline’ów). Umiejętność programowania w: Python (mile widziany PySpark). JavaScript (mile widziany TypeScript). SQL – jako uzupełnienie, nie jedyna technologia. Znajomość środowisk chmurowych: AWS lub Azure. Zrozumienie zagadnień data governance oraz ontology / semantic layer. Bardzo dobre umiejętności komunikacyjne oraz doświadczenie we współpracy z klientem. Mile widziane: Doświadczenie w obszarze Governance & Security w Foundry (Projects & User Groups, Markings). Doświadczenie w industrializacji modeli (ML / optymalizacja) w Foundry: Jupyter / Code Workbook, Modeling Objectives. Znajomość AIP. Świadomość oraz stosowanie dobrych praktyk wytwarzania rozwiązań w Foundry. O projekcie: Dla naszego Klienta poszukujemy doświadczonej osoby w obszarze Palantir Data Engineering do projektu obejmującego projektowanie oraz wdrażanie rozwiązań data engineering w środowisku Palantir Foundry. Projekt zakłada realizację use case’ów end-to-end – od podłączenia źródeł danych, przez budowę pipeline’ów i warstwy semantycznej (ontology), aż po dostarczenie rozwiązań i aplikacji w Foundry, przy bliskiej współpracy z klientem oraz zespołami cross-functional. Zakres obowiązków: Współpraca bezpośrednio z klientem oraz zespołami biznesowymi i technologicznymi w celu zrozumienia potrzeb oraz przełożenia ich na rozwiązania w Palantir Foundry. Projektowanie oraz wdrażanie rozwiązań technicznych (solution design & implementation) – samodzielnie lub jako osoba prowadząca wybrane obszary projektu. Doradztwo w zakresie najlepszych praktyk Foundry oraz budowy workflowów danych (sposobu pobierania, przetwarzania oraz wykorzystania danych). Tworzenie i rozwój data pipelines w Foundry: Podłączanie źródeł danych (Data Connection). Zadania związane z przepływem oraz pochodzeniem danych (Data Lineage). Budowa pipeline’ów w Pipeline Builder oraz rozwój rozwiązań w Code Repositories. Modelowanie oraz utrzymanie Ontology (warstwy semantycznej): Object types (typy obiektów). Properties (atrybuty). Links (relacje / powiązania). Tworzenie akcji oraz operacji na obiektach (Action types, Functions). Wykorzystanie narzędzi Foundry wspierających analitykę oraz development (Workshop, Quiver / Contour – w zależności od zakresu projektu). Udział w tworzeniu oraz wdrażaniu aplikacji i rozwiązań osadzonych w Foundry. Dostosowywanie rozwiązań do innych technologii wykorzystywanych w projekcie (np. cloud, integracje). Współpraca przy zasadach dostępu oraz uporządkowania danych (data governance / security) w Foundry. Oferujemy: Współpracę B2B w ramach projektu. Model 100% zdalny. Projekt w środowisku, gdzie kluczowe są jakość danych, skalowalne pipeline’y oraz przemyślana warstwa semantyczna (ontology). Bliską współpracę z klientem oraz realny wpływ na architekturę i sposób dostarczania rozwiązań w Foundry.