Senior Data Engineer (k/m)

Kim jesteśmy? Lumicode Sp. z o.o. jest częścią Grupy Pentacomp - od blisko 30 lat dostarczającej rozwiązania IT i usługi technologiczne dla największych przedsiębiorstw oraz instytucji sektora publicznego. Do zespołu Reinsurance Technology szukamy Senior Data Engineera, który dołączy do strategicznego projektu migracji danych z rozwiązania on-premise do chmurowej platformy Moody’s Risk Modeler. Co oferujemy? Stawka: 150 PLN/h/ B2B Udział w strategicznym projekcie migracji do rozwiązania chmurowego Możliwość korzystania z dofinansowania do karty sportowej Możliwość skorzystania z prywatnej opieki zdrowotnej Twój zakres obowiązków Projektowanie i rozwijanie skalowalnych pipeline’ów danych oraz produktów danych. Projektowanie repozytoriów dla danych ekspozycyjnych i danych o stratach wykorzystywanych w modelowaniu katastroficznym. Integracja wyników modeli ryzyka z systemami wyceny reasekuracyjnej za pomocą API i warstw integracyjnych. Rozwijanie rozwiązań opartych na Pythonie, SQL, Snowflake, Azure, GCP i dbt. Monitorowanie jakości, poprawności i dostępności danych oraz optymalizacja wydajności pipeline’ów. Projektowanie i wdrażanie walidacji danych, mechanizmów lineage oraz monitoringu. Udział w code review, testowaniu i automatyzacji procesów. Współpraca z Data Engineerami, Software Engineerami, Data Scientistami, Product Ownerami oraz biznesem. Przygotowywanie dokumentacji technicznej i runbooków wspierających utrzymanie rozwiązań. Wymagane umiejętności Szukamy osoby z co najmniej 5-letnim doświadczeniem w Data Engineering, która swobodnie porusza się w obszarze przetwarzania i integracji danych. Najważniejsze technologie i obszary: Bardzo dobra znajomość Python i SQL. Praktyczne doświadczenie z Azure SQL. Doświadczenie w pracy z chmurą, szczególnie Azure i GCP. Znajomość Snowflake lub podobnych hurtowni danych. Doświadczenie z narzędziami do orkiestracji, takimi jak Prefect, Apache Airflow lub Azure Data Factory. Praktyczna znajomość dbt lub podobnych narzędzi do transformacji danych. Doświadczenie z CI/CD i automatycznym testowaniem rozwiązań danych. Znajomość modelowania danych w podejściu OLTP i OLAP. Doświadczenie w pracy zarówno z danymi strukturalnymi, jak i półstrukturalnymi. Znajomość relacyjnych baz danych oraz przynajmniej ekspozycja na rozwiązania NoSQL. Doświadczenie w pracy w środowisku Agile. Angielski na poziomie minimum B2+. Mile widziane Doświadczenie w projektach związanych z migracją danych i modernizacją środowisk on-premise do chmury. Znajomość domeny ubezpieczeniowej lub reasekuracyjnej. Doświadczenie z rozwiązaniami wspierającymi modelowanie ryzyka i analizę danych.