Data Engineer (Databricks)

Data Engineer (Databricks)

Miejsce pracy: Poznań

Technologie, których używamy

Wymagane

• PySpark
• Python
• SQL
• Teradata

O projekcie

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Wykorzystujemy szerokie spektrum usług IT, aby wspierać naszych klientów w realizacji ich celów biznesowych.

Obszary naszej działalności obejmują m.in.:

• doradztwo technologiczne,

• tworzenie oprogramowania,

• systemy wbudowane,

• rozwiązania chmurowe,

• zarządzanie danymi,

• dedykowane zespoły projektowe.

Cześć! Poznaj możliwości współpracy ze Scalo!

Twój zakres obowiązków

• projekt realizowany w branży finansowej w obszarze AML,
• współpracę w zespole analityczno-modelarskim z Data Analitykami oraz Developerami,
• rozwój i migrację warstwy danych AML obejmującą centralizację danych z wielu źródeł,
• migrację istniejących procesów ETL do nowego środowiska analitycznego,
• dostosowanie architektury danych oraz procesów do środowiska opartego o Databricks,
• projektowanie, modelowanie, rekomendowanie oraz implementację rozwiązań w PySpark z wykorzystaniem Databricks,
• rozwój warstwy danych na poziomie gold w hurtowni danych,
• integrację procesów z różnorodnymi źródłami danych, w tym API oraz źródłami wsadowymi,
• wykorzystanie technologii Python, PySpark, SQL (Teradata) oraz Databricks,
• świadczenie usług w modelu zdalnym z wizytami w biurze raz na kwartał w Warszawie, Wrocławiu lub Poznaniu,
• stawka do 130 PLN/h + VAT w oparciu o współpracę B2B.

Nasze wymagania

• wykształcenie wyższe STEM,
• 5–8 lat doświadczenia w realizacji projektów związanych z przetwarzaniem i analizą danych,
• bardzo dobra znajomość Databricks, w tym umiejętność projektowania i implementacji rozwiązań, a nie wyłącznie korzystania z platformy od strony użytkownika,
• praktyczne doświadczenie w wykorzystaniu PySpark,
• doświadczenie w projektowaniu oraz migracji procesów ETL,
• umiejętność modelowania oraz przetwarzania danych w środowiskach hurtowni danych,
• doświadczenie w parsowaniu danych,
• doświadczenie w integracji procesów ze źródłami danych opartymi o API oraz procesy batchowe,
• bardzo dobra znajomość języka Python,
• praktyczna znajomość SQL, w szczególności środowiska Teradata,
• wysoko rozwinięte umiejętności analityczne,umiejętność współpracy w zespołach projektowych,
• komunikatywność oraz otwartość na współpracę zespołową.

To oferujemy

• możliwość świadczenia usług w różnorodnych projektach z obszaru Software, Embedded, Data i Cloud Services,
• zaangażowanie w dodatkowe inicjatywy presealsowe oraz eksperckie,
• dostęp do opieki medycznej, karty sportowej oraz platformy kafeteryjnej zgodnie z obowiązującymi zasadami współpracy.

Etapy rekrutacji

• CV
• Rozmowa wstępna
• Rozmowa techniczna
• Gotowe - działamy!

Brzmi interesująco? Aplikuj – czekamy na Twoje CV!

Scalo Sp. z o.o.

Scalo to firma, która od 18 lat tworzy oprogramowanie dla biznesu. Zrealizowaliśmy ponad 750 projektów dla firm z różnych branż – od startupów po międzynarodowe korporacje. Nasze doświadczenie pozwala nam szybko zrozumieć potrzeby klientów i dostarczyć rozwiązania, które faktycznie wspierają rozwój ich firm.

Klikając w przycisk „Aplikuj” lub w inny sposób wysyłając zgłoszenie rekrutacyjne, zgadzasz się na przetwarzanie Twoich danych osobowych przez Scalo Sp. z o.o. z siedzibą w: Powstańców Śląskich 9, 53-332 Wrocław (Pracodawca), jako administratora danych osobowych w celu przeprowadzenia rekrutacji na stanowisko wskazane w ogłoszeniu.
Twoje dane osobowe będą przetwarzane w oparciu o następujące podstawy prawne: (a) aby podjąć działania na Twoje żądanie przed zawarciem umowy (np. informacje o oczekiwanym wynagrodzeniu i dostępności do rozpoczęcia pracy); (b) w oparciu o nasz prawnie uzasadniony interes (np. imię, nazwisko, data urodzenia, dane kontaktowe, wykształcenie, kwalifikacje zawodowe, przebieg dotychczasowego zatrudnienia); c) w oparciu o Twoją zgodę, która wyrażona jest poprzez przeslanie dokumentów aplikacyjnych zawierających takie informacje jak np. wizerunek czy zainteresowania. Podanie wszystkich danych osobowych, o których mowa powyżej jest dobrowolne, natomiast dane wymienione w lit. a) i b) są niezbędne do wzięcia udziału w rekrutacji. Niepodanie danych skutkuje brakiem możliwości rozpatrzenia kandydatury. Podanie pozostałych danych jest dobrowolne, ale może pomóc w sprawnym przeprowadzeniu procesu rekrutacji. Masz prawo żądać dostępu do Twoich danych (w tym uzyskania ich kopii), sprostowania danych, ich usunięcia, ograniczenia przetwarzania, przeniesienia, jak również wniesienia sprzeciwu wobec ich przetwarzania. Masz także prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych. Twoje dane osobowe mogą zostać przekazane dostawcom usługi publikacji ogłoszeń o pracę, dostawcom systemów do zarządzania rekrutacjami, dostawcom usług IT (hosting), dostawcom systemów informatycznych. Podane przez Ciebie dane osobowe nie będą wykorzystywane w celu profilowania albo podejmowania decyzji w sposób zautomatyzowany. Twoje dane osobowe będą przetwarzane przez okres maks. 1 roku od zakończenia publikacji ogłoszenia, chyba, że wyraziłeś odrębną zgodę na wykorzystanie Twoich danych osobowych w przyszłych rekrutacjach. W celu realizacji praw lub w przypadku jakichkolwiek pytań związanych z przetwarzaniem Twoich danych osobowych skontaktuj się z nami pod adresem: Wyświetl e-mail na pracuj.pl.