Data Engineer (F/M)
B2Bnetwork
O projekcie Poszukujemy Data Engineera do projektu z obszaru CRM i zaawansowanej analityki danych. Zespół rozwija rozwiązania wspierające budowę profilu klienta 360 stopni, systemy rekomendacyjne, Real Time Decisioning oraz procesy Next Best Action/Next Best Activity. Rola obejmuje projektowanie struktur danych wykorzystywanych przez systemy analityczne, kampanijne i operacyjne. Istotnym elementem projektu jest przetwarzanie dużych wolumenów danych, budowa stabilnych pipeline ETL/ELT oraz integracja ekosystemu CRM z innymi systemami organizacji. Zakres obowiązków • projektowanie, budowa i optymalizacja struktur danych dla systemów Real Time Decisioning, silników rekomendacyjnych oraz rozwiązań Next Best Action/Next Best Activity • tworzenie struktur danych wspierających profil klienta 360 stopni oraz Customer Golden Record • budowa agregatów behawioralnych i cech wykorzystywanych przez modele analityczne • rozwój pipeline ETL/ELT działających w trybie batchowym, near real time oraz event driven • przygotowywanie struktur danych na potrzeby raportowania i zaawansowanej analityki • projektowanie i budowa interfejsów pomiędzy ekosystemem CRM a systemami operacyjnymi • integracja rozwiązań analitycznych z platformami Campaign Management, systemami rekomendacyjnymi i silnikami decyzyjnymi • optymalizacja zapytań SQL oraz procesów przetwarzania dużych wolumenów danych • implementacja mechanizmów kontroli jakości, monitoringu i walidacji danych • współpraca z zespołami biznesowymi, analitycznymi, CRM i IT Wymagania • minimum 4 lata doświadczenia na stanowisku Data Engineer • doświadczenie w projektowaniu i modelowaniu struktur danych dla hurtowni danych, Data Lake lub zaawansowanej analityki • praktyczne doświadczenie z rozwiązaniami działającymi w czasie rzeczywistym, near real time lub event driven • doświadczenie w przetwarzaniu bardzo dużych wolumenów danych • bardzo dobra znajomość SQL oraz doświadczenie w optymalizacji zapytań i struktur danych • doświadczenie w budowie i utrzymaniu pipeline ETL/ELT • praktyczna znajomość platform chmurowych, preferencyjnie Google Cloud Platform • doświadczenie z technologiami Big Data • znajomość narzędzi do orkiestracji procesów • znajomość formatów danych zoptymalizowanych pod analitykę, takich jak Parquet, Avro lub ORC • doświadczenie w integracji systemów analitycznych z systemami operacyjnymi • znajomość zasad kontroli jakości i walidacji danych • doświadczenie w pracy w Agile/Scrum Dodatkowym atutem będzie • doświadczenie w projektach związanych z CRM, personalizacją lub kampaniami marketingowymi • znajomość danych CRM, w tym zgód marketingowych, historii kontaktów oraz optout • doświadczenie w budowie profilu klienta 360 stopni, Customer Golden Record, agregatów behawioralnych lub Feature Store • znajomość rozwiązań takich jak Pega, Salesforce, SAS lub Adobe • doświadczenie w migracji platform danych lub systemów CRM • doświadczenie w sektorze bankowym, ubezpieczeniowym, telekomunikacyjnym, fintech, retail lub e commerce Oferujemy • długoterminową współpracę w projekcie o dużej skali danych • udział w budowie rozwiązań CRM, Customer 360 i Real Time Decisioning • pracę z technologiami chmurowymi i Big Data • realny wpływ na architekturę oraz sposób przetwarzania danych • współpracę z doświadczonymi zespołami data, CRM i IT • hybrydowy model pracy z biura w Warszawie