Developer Hurtowni Danych

Developer Hurtowni Danych

Miejsce pracy: Warszawa

Technologie, których używamy

Wymagane

• Orcle
• ETL
• Databricks
• Git
• GitHub
• Bitbucket
• Bamboo

System operacyjny

• Windows

O projekcie

Dołącz do projektu realizowanego dla dużej organizacji z branży ubezpieczeniowej i pracuj przy integracji nowoczesnej platformy chmurowej z istniejącym środowiskiem Hurtowni Danych.

Poszukujemy doświadczonego Senior Data Engineera / Developera HD, który wesprze rozwój i integrację środowiska danych łączącego Databricks i Azure z rozwiązaniami on-premise opartymi o Oracle i SAS.

Rola łączy praktyczną pracę z danymi i procesami ETL z udziałem w projektowaniu architektury, standardów technicznych oraz rozwiązań integracyjnych. Pracujemy hybrydowo – 1x w tygodniu w Warszawie.

Twój zakres obowiązków

• integracja platformy Databricks z istniejącą Hurtownią Danych opartą o Oracle i SAS,
• projektowanie i implementacja procesów ETL oraz przepływów danych pomiędzy środowiskiem cloud i on-premise,
• integracja Databricks, Azure Data Factory i Oracle oraz przygotowywanie danych do dalszego przetwarzania w HD,
• udział w projektowaniu architektury rozwiązań danych i definiowaniu standardów technicznych,
• projektowanie interfejsów wymiany danych pomiędzy systemami,
• automatyzacja procesów wytwarzania i utrzymania rozwiązań z wykorzystaniem CI/CD, GitHub Copilot i Visual Studio Code,
• rozwój i utrzymanie rozwiązań HD/BI w technologiach SAS, Oracle, Microsoft Fabric, Python i Kafka,
• budowa technicznych data martów, raportów BI oraz komponentów wspierających przetwarzanie i optymalizację danych,
• technologiczne, integracyjne i architektoniczne wsparcie strategicznych projektów Data & Analytics.

Nasze wymagania

• praktycznego doświadczenia w budowie i rozwoju Hurtowni Danych,
• bardzo dobrej znajomości Oracle,
• doświadczenia w projektowaniu i implementacji procesów ETL,
• bardzo dobrej znajomości modelowania danych i projektowania przepływów danych,
• praktycznej znajomości Databricks,
• doświadczenia w pracy z danymi w środowisku cloud data platform,
• doświadczenia w integracji Databricks z systemami zewnętrznymi,
• doświadczenia w środowiskach hybrydowych: cloud + on-premise,
• doświadczenia w projektach Data & Analytics,
• znajomości Git / GitHub / Bitbucket / Bamboo oraz automatyzacji procesu wytwarzania,
• doświadczenia w wykorzystaniu AI / GitHub Copilot w pracy developerskiej lub analitycznej,
• umiejętności projektowania rozwiązań analitycznych, definiowania standardów technicznych oraz architektury rozwiązań danych.

Mile widziane

• znajomość Oracle Exadata,
• znajomość SAS 9.4 i SAS Viya,
• doświadczenie z procesami realizowanymi w środowisku SAS,
• znajomość Azure Data Factory,
• doświadczenie w integracji danych pomiędzy środowiskiem cloud i on-premise,
• znajomość platform danych w Microsoft Azure,
• znajomość nowoczesnych architektur danych,
• doświadczenie z Microsoft Fabric,
• znajomość Python i tworzenia skryptów integracyjnych,
• znajomość formatu Parquet i warstw Data Lake,
• doświadczenie z Apache Kafka i strumieniowym przetwarzaniem danych.

Benefity

• dofinansowanie zajęć sportowych
• prywatna opieka medyczna
• dofinansowanie nauki języków
• możliwość pracy zdalnej
• elastyczny czas pracy
• spotkania integracyjne
• firmowa biblioteka
• brak dress code’u
• kawa / herbata
• napoje
• parking dla pracowników
• strefa relaksu

Etapy rekrutacji

• Rozmowa telefoniczna
• Rozmowa techniczna
• Decyzja

GOLDENORE ITC sp. z o.o.

Dołącz do zespołu IT wspierającego kluczowe systemy jednego z liderów międzynarodowego rynku usług logistycznych i transportowych.

Klikając w przycisk „Aplikuj” lub w inny sposób wysyłając zgłoszenie rekrutacyjne, zgadzasz się na przetwarzanie Twoich danych osobowych przez GOLDENORE ITC sp. z o.o. z siedzibą w: Aleje Jerozolimskie 160, 02-326 Warszawa (Pracodawca), jako administratora danych osobowych w celu przeprowadzenia rekrutacji na stanowisko wskazane w ogłoszeniu.
Twoje dane osobowe będą przetwarzane w oparciu o następujące podstawy prawne: (a) aby podjąć działania na Twoje żądanie przed zawarciem umowy (np. informacje o oczekiwanym wynagrodzeniu i dostępności do rozpoczęcia pracy); (b) w oparciu o nasz prawnie uzasadniony interes (np. imię, nazwisko, data urodzenia, dane kontaktowe, wykształcenie, kwalifikacje zawodowe, przebieg dotychczasowego zatrudnienia); c) w oparciu o Twoją zgodę, która wyrażona jest poprzez przeslanie dokumentów aplikacyjnych zawierających takie informacje jak np. wizerunek czy zainteresowania. Podanie wszystkich danych osobowych, o których mowa powyżej jest dobrowolne, natomiast dane wymienione w lit. a) i b) są niezbędne do wzięcia udziału w rekrutacji. Niepodanie danych skutkuje brakiem możliwości rozpatrzenia kandydatury. Podanie pozostałych danych jest dobrowolne, ale może pomóc w sprawnym przeprowadzeniu procesu rekrutacji. Masz prawo żądać dostępu do Twoich danych (w tym uzyskania ich kopii), sprostowania danych, ich usunięcia, ograniczenia przetwarzania, przeniesienia, jak również wniesienia sprzeciwu wobec ich przetwarzania. Masz także prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych. Twoje dane osobowe mogą zostać przekazane dostawcom usługi publikacji ogłoszeń o pracę, dostawcom systemów do zarządzania rekrutacjami, dostawcom usług IT (hosting), dostawcom systemów informatycznych. Podane przez Ciebie dane osobowe nie będą wykorzystywane w celu profilowania albo podejmowania decyzji w sposób zautomatyzowany. Twoje dane osobowe będą przetwarzane przez okres maks. 1 roku od zakończenia publikacji ogłoszenia, chyba, że wyraziłeś odrębną zgodę na wykorzystanie Twoich danych osobowych w przyszłych rekrutacjach. W celu realizacji praw lub w przypadku jakichkolwiek pytań związanych z przetwarzaniem Twoich danych osobowych skontaktuj się z nami pod adresem: Wyświetl e-mail na pracuj.pl.