Senior Data Engineer (Rust, DataFusion)

Rekrutujemy dla, Dla naszego klienta poszukujemy kandydatów na stanowisko:, , Senior Data Engineer (Rust, DataFusion)

Wymagane, Rust, Apache DataFusion, Apache Arrow, PostgreSQL, SQL, Parquet, CSV

O projekcie, Projekt: Tworzenie od podstaw nowoczesnego, wysokowydajnego silnika bazodanowego i warstwy przetwarzania zapytań, dedykowanych do skomplikowanych obliczeń finansowych., , Stack technologiczny: Rust, Apache DataFusion, Apache Arrow, PostgreSQL, SQL, Parquet, CSV., , Zespół: Samodzielne stanowisko inżynierskie w obszarze silnika wykonawczego, ściśle współpracujące z ekspertami domenowymi w ramach rozproszonego środowiska., , Model współpracy: 100% zdalnie., , Wynagrodzenie: 30 000 - 37 000 PLN netto (B2B, do negocjacji)., , Start współpracy: ⏳ ASAP / do 1 miesiąca.

Twój zakres obowiązków, Optymalizacja i integracja źródeł danych (takich jak PostgreSQL oraz pliki Parquet/CSV), obejmująca mechanizmy pushdownu predykatów i szybkie przetwarzanie wsadowe., Tworzenie oraz wdrażanie zaawansowanych mechanizmów kontrolnych na produkcję, w tym zapewnienie precyzji wyliczeń numerycznych, monitorowanie stanu systemu oraz optymalne zarządzanie pamięcią., Projektowanie transformacji tabelarycznych w środowisku Rust i rozbudowa frameworków Arrow oraz DataFusion o dedykowane komponenty planowania zapytań., Budowa trwałego katalogu na potrzeby definicji danych oraz implementacja widoków semantycznych i nowych rozszerzeń dla języka SQL., Zapewnienie niezawodnego dostępu do danych dla narzędzi BI i klientów JDBC/JOOQ, poprzez budowę interfejsu SQL zachowującego pełną kompatybilność z PostgreSQL.

Zaawansowana, poparta komercyjnym doświadczeniem znajomość języka Rust (w szczególności: asynchroniczność, zarządzanie pamięcią, współbieżność, profilowanie kodu)., Biegłe posługiwanie się językiem SQL oraz dogłębne zrozumienie specyfiki PostgreSQL (plany zapytań, agregacje, joiny, zasady spójności transakcyjnej)., Praktyka w tworzeniu niezawodnych systemów backendowych o dużej wydajności, budowie silników zapytań lub infrastruktury analitycznej., Bezwzględna dbałość o wysoką jakość kodu, bezawaryjność wdrożeń produkcyjnych oraz tworzenie kompleksowych testów.

Mile widziane, praktyczna znajomość narzędzi Apache Arrow / DataFusion, doświadczenie w budowaniu parserów SQL lub w projektowaniu systemów pod precyzyjne wyliczenia finansowe.

To oferujemy, Współpracę w oparciu o kontrakt B2B., Całkowicie zdalny model pracy., Pełne pokrycie kosztów ewentualnych, incydentalnych podróży i spotkań projektowych., Olbrzymią niezależność oraz decyzyjność techniczną przy rozwijaniu kluczowych komponentów systemu.

Etapy rekrutacji, Wywiad telefoniczny z przedstawicielem zespołu HR (~20 min.), Rozmowa techniczno-biznesowa

Next Technology Professionals Sp. z o.o., Next Technology Professionals to wyspecjalizowana agencja rekrutacyjna i firma outsourcingowa o silnym profilu technologicznym., , Od ponad 10 lat wspieramy firmy w budowie zespołów IT, AI, Cybersecurity, SAP oraz w rekrutacjach dla finansów, inżynierii i marketingu., , Zrealizowaliśmy ponad 1000 skutecznych procesów rekrutacyjnych dla korporacji, scale-upów i dynamicznie rosnących startupów., , Przesyłając swoje CV do Next Technology Professionals, trafiasz do starannie wyselekcjonowanej bazy kandydatów realizujących, , projekty dla wiodących globalnych organizacji. Pracujemy wyłącznie w oparciu o aktualne, konkretne potrzeby klientów., , Jeśli Twój profil będzie odpowiadał jednemu z prowadzonych procesów, skontaktujemy się niezwłocznie.