Data Engineer

Data Engineer

Miejsce pracy: Warszawa

Technologie, których używamy

Wymagane

• Snowflake
• SQL
• DBT
• GitLab

Mile widziane

• R
• Shiny
• Streamlit
• Tableau
• SAP
• Monte Carlo
• Collibra
• Immuta
• Talend
• Apache Airflow

Twój zakres obowiązków

• Rozwijanie i rozszerzanie warstwy analitycznej Snowflake dla określonych pipeline’ów: źródłowych, agregacyjnych oraz zorientowanych na potrzeby odbiorców biznesowych.
• Implementacja zmian wynikających z wymagań biznesowych: dodawanie nowych atrybutów, zmiana logiki agregacji, poziomów drill-down oraz obsługa historyzacji/wersjonowania cykli planistycznych.
• Tworzenie i utrzymywanie modeli, testów oraz dokumentacji w DBT; zarządzanie kodem w GitLab zgodnie z zasadami pracy z branchami, merge requestami i code review.
• Projektowanie i implementacja logiki transformacji oraz analityki, m.in.: konsolidacja statusów partii, analiza przyczyn odrzucenia, porównanie standardowego i rzeczywistego nakładu pracy, podstawowa statystyczna kontrola procesu (SPC), jeśli jest wymagana.
• Zapewnienie zgodności ze standardami dotyczącymi m.in. nazewnictwa, warstw danych, odpowiedzialności za produkty danych, lineage oraz dokumentacji.
• Przeprowadzanie walidacji i uzgadniania danych z systemami źródłowymi oraz wsparcie monitorowania jakości danych.
• Udział w planowaniu sprintów, estymacjach i demo, poprawianie błędów wykrytych podczas UAT oraz udoskonalanie logiki na podstawie feedbacku.
• Współtworzenie dokumentacji technicznej oraz przekazywanie wiedzy do zespołu odpowiedzialnego za wsparcie.

Nasze wymagania

• Minimum 3 lata doświadczenia jako konsultant IT / data engineer w obszarze realizacji rozwiązań analitycznych.
• Praktyczne doświadczenie z Snowflake: warehouses, role, tasks/streams, modelowanie SQL z uwzględnieniem wydajności; zaawansowana znajomość SQL.
• Praktyczne wykorzystanie DBT w środowisku produkcyjnym (modele, makra, testy, dokumentacja).
• Znajomość GitLab (lub analogicznego workflow Git), w tym wdrażanie modeli danych z wykorzystaniem CI.
• Doświadczenie w refaktoryzacji istniejących pipeline’ów, zamiast tworzenia rozwiązań od podstaw; umiejętność pracy na podstawie wymagań pisemnych i mockupów.
• Płynna znajomość języka angielskiego (C1).

Mile widziane

• Znajomość domeny produkcji i analizy wydajności produkcji (production yield analysis).
• Znajomość R/Shiny lub Streamlit w kontekście tworzenia prototypów analitycznych.
• Doświadczenie w modelowaniu źródeł danych dla Tableau (extracts, published data sources, row-level security).
• Doświadczenie z ekstrakcją danych z SAP (P1U/PDC) oraz znajomość narzędzi/technologii takich jak Monte Carlo, Collibra, Immuta, Talend lub orkiestracja w stylu Airflow.

To oferujemy

• Pracę przy projektach klienckich i produktach własnych
• Realny wpływ na rozwiązania biznesowe i technologiczne w ramach realizowanych projektów
• Szkolenia oraz wsparcie w określeniu ścieżki rozwoju
• Eventy firmowe, dostęp do usług medycznych oraz pakietów sportowych
• Zatrudnienie na umowę B2B / UZ Student
• Pracę w trybie zdalnym/ hybrydowym (Warszawa)
• Krótki proces rekrutacji

Klikając w przycisk „Aplikuj” lub w inny sposób wysyłając zgłoszenie rekrutacyjne, zgadzasz się na przetwarzanie Twoich danych osobowych przez IT SQUAD SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ z siedzibą w: Rondo Daszyńskiego 1, 00-843 Warszawa (Pracodawca), jako administratora danych osobowych w celu przeprowadzenia rekrutacji na stanowisko wskazane w ogłoszeniu.
Twoje dane osobowe będą przetwarzane w oparciu o następujące podstawy prawne: (a) aby podjąć działania na Twoje żądanie przed zawarciem umowy (np. informacje o oczekiwanym wynagrodzeniu i dostępności do rozpoczęcia pracy); (b) w oparciu o nasz prawnie uzasadniony interes (np. imię, nazwisko, data urodzenia, dane kontaktowe, wykształcenie, kwalifikacje zawodowe, przebieg dotychczasowego zatrudnienia); c) w oparciu o Twoją zgodę, która wyrażona jest poprzez przeslanie dokumentów aplikacyjnych zawierających takie informacje jak np. wizerunek czy zainteresowania. Podanie wszystkich danych osobowych, o których mowa powyżej jest dobrowolne, natomiast dane wymienione w lit. a) i b) są niezbędne do wzięcia udziału w rekrutacji. Niepodanie danych skutkuje brakiem możliwości rozpatrzenia kandydatury. Podanie pozostałych danych jest dobrowolne, ale może pomóc w sprawnym przeprowadzeniu procesu rekrutacji. Masz prawo żądać dostępu do Twoich danych (w tym uzyskania ich kopii), sprostowania danych, ich usunięcia, ograniczenia przetwarzania, przeniesienia, jak również wniesienia sprzeciwu wobec ich przetwarzania. Masz także prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych. Twoje dane osobowe mogą zostać przekazane dostawcom usługi publikacji ogłoszeń o pracę, dostawcom systemów do zarządzania rekrutacjami, dostawcom usług IT (hosting), dostawcom systemów informatycznych. Podane przez Ciebie dane osobowe nie będą wykorzystywane w celu profilowania albo podejmowania decyzji w sposób zautomatyzowany. Twoje dane osobowe będą przetwarzane przez okres maks. 1 roku od zakończenia publikacji ogłoszenia, chyba, że wyraziłeś odrębną zgodę na wykorzystanie Twoich danych osobowych w przyszłych rekrutacjach. W celu realizacji praw lub w przypadku jakichkolwiek pytań związanych z przetwarzaniem Twoich danych osobowych skontaktuj się z nami pod adresem: Wyświetl e-mail na pracuj.pl.