Data Engineer

Data Engineer

Miejsce pracy: Kraków

Technologie, których używamy

Wymagane

• SQL
• Python
• Scala
• Spark
• Azure Cloud
• Databricks
• Microsoft Power BI

O projekcie

Poszukujemy doświadczonej osoby na stanowisko Data Engineer. Kluczowym elementem roli będzie praca z bazami relacyjnymi i NoSQL, optymalizacja zapytań oraz projektowanie schematów danych, a także wykorzystanie Graph Databases do budowy knowledge graphs i wyszukiwania relacji między encjami. Praca jest dedykowana dla rozpoznawalnej firmy z branży bankowej.

Tak organizujemy naszą pracę

Tak pracujemy

• agile

Twój zakres obowiązków

• Projektowanie, rozwój i utrzymanie rozwiązań związanych z wyszukiwaniem i odkrywaniem danych.
• Praca z relacyjnymi i nierelacyjnymi bazami danych (SQL i NoSQL).
• Projektowanie schematów danych oraz optymalizacja złożonych zapytań.
• Rozwijanie mechanizmów wyszukiwania, w tym indeksowania, rankingu, wyszukiwania tekstowego i semantycznego oraz vector search.
• Praca z Graph Databases i wykorzystywanie ich do budowy knowledge graphs oraz wyszukiwania relacji między encjami.
• Projektowanie i utrzymanie API wyszukiwania, pipeline'ów indeksujących oraz komponentów wyszukiwania opartych na metadanych.
• Współpraca z interesariuszami biznesowymi i technicznymi w celu przekładania potrzeb związanych z wyszukiwaniem danych na rozwiązania technologiczne.

Nasze wymagania

• Minimum 5 lat doświadczenia na stanowisku Data Engineerwa lub w podobnej roli, najlepiej z doświadczeniem w środowiskach dużej skali / Big Data.
• Bardzo dobra znajomość SQL oraz systemów bazodanowych – relacyjnych i NoSQL, w szczególności: optymalizacji zapytań, projektowania schematów, pracy z dużymi zbiorami danych.
• Znajomość Graph Databases, np. Neo4j lub Azure Cosmos DB Gremlin API, oraz ich zastosowania w budowaniu knowledge graphs i wyszukiwaniu relacji między encjami.
• Praktyczne doświadczenie z platformami wyszukiwania lub technologiami Information Retrieval (indeksowanie, ranking, wyszukiwanie tekstowe i semantyczne, modelowanie metadanych, vector search, dostrajanie trafności wyników)
• Dobre umiejętności programistyczne w Python lub Scala i Spark.
• Doświadczenie z technologiami Big Data, takimi jak: Azure Cloud, Databricks i Power BI.
• Doświadczenie w projektowaniu lub utrzymywaniu Search APIs, indexing pipelines lub komponentów wyszukiwania opartych na metadanych.
• Umiejętności analityczne, rozwiązywania problemów oraz zarządzania danymi.
• Język angielski (min B2)

To oferujemy

• Praca w modelu hybrydowym (biuro w Krakowie)
• Współpraca w oparciu o kontrakt B2B
• Stawka: (140 - 162.5) pln/h + VAT

ITP IT PERFORMANCE sp. z o.o.

Jako ITP IT Performance specjalizujemy się w outsourcingu, konsultingu i rekrutacji głównie w obszarze IT.

Klikając w przycisk „Aplikuj” lub w inny sposób wysyłając zgłoszenie rekrutacyjne, zgadzasz się na przetwarzanie Twoich danych osobowych przez ITP IT PERFORMANCE sp. z o.o. z siedzibą w: Długa 29, 00-238 Warszawa (Pracodawca), jako administratora danych osobowych w celu przeprowadzenia rekrutacji na stanowisko wskazane w ogłoszeniu.
Twoje dane osobowe będą przetwarzane w oparciu o następujące podstawy prawne: (a) aby podjąć działania na Twoje żądanie przed zawarciem umowy (np. informacje o oczekiwanym wynagrodzeniu i dostępności do rozpoczęcia pracy); (b) w oparciu o nasz prawnie uzasadniony interes (np. imię, nazwisko, data urodzenia, dane kontaktowe, wykształcenie, kwalifikacje zawodowe, przebieg dotychczasowego zatrudnienia); c) w oparciu o Twoją zgodę, która wyrażona jest poprzez przeslanie dokumentów aplikacyjnych zawierających takie informacje jak np. wizerunek czy zainteresowania. Podanie wszystkich danych osobowych, o których mowa powyżej jest dobrowolne, natomiast dane wymienione w lit. a) i b) są niezbędne do wzięcia udziału w rekrutacji. Niepodanie danych skutkuje brakiem możliwości rozpatrzenia kandydatury. Podanie pozostałych danych jest dobrowolne, ale może pomóc w sprawnym przeprowadzeniu procesu rekrutacji. Masz prawo żądać dostępu do Twoich danych (w tym uzyskania ich kopii), sprostowania danych, ich usunięcia, ograniczenia przetwarzania, przeniesienia, jak również wniesienia sprzeciwu wobec ich przetwarzania. Masz także prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych. Twoje dane osobowe mogą zostać przekazane dostawcom usługi publikacji ogłoszeń o pracę, dostawcom systemów do zarządzania rekrutacjami, dostawcom usług IT (hosting), dostawcom systemów informatycznych. Podane przez Ciebie dane osobowe nie będą wykorzystywane w celu profilowania albo podejmowania decyzji w sposób zautomatyzowany. Twoje dane osobowe będą przetwarzane przez okres maks. 1 roku od zakończenia publikacji ogłoszenia, chyba, że wyraziłeś odrębną zgodę na wykorzystanie Twoich danych osobowych w przyszłych rekrutacjach. W celu realizacji praw lub w przypadku jakichkolwiek pytań związanych z przetwarzaniem Twoich danych osobowych skontaktuj się z nami pod adresem: Wyświetl e-mail na pracuj.pl.