Szukamy doświadczonego Senior Data Enginera, który dołączy do naszego zespołu i wesprze rozwój nowoczesnych, skalowalnych platform danych opartych na architekturze czasu rzeczywistego. Klient kładzie silny nacisk na wysoki poziom senioralny, dlatego w procesie rekrutacyjnym kluczowa będzie nie tylko znajomość technologii, ale również solidna wiedza z zakresu modelowania danych i hurtowni danych.
---
Krótka rozmowa telefoniczna informacyjno-zapoznawcza z rekruterem […] (~10 min)
Weryfikacja techniczno-projektowa z Klientem (~1 - 1,5 h)
(Jeśli OK) Rozmowa zapoznawcza z przedstawicielem projektu u Klienta końcowego (~ 30 min)
Decyzja o podjęciu współpracy
Zakres obowiązków:
Projektowanie i rozwój strumieniowych potoków danych w czasie rzeczywistym przy użyciu Apache Kafka oraz Confluent Cloud.
Tworzenie i optymalizowanie procesów ETL/ELT oraz skryptów przetwarzających dane w języku Python oraz zaawansowanych zapytań SQL.
Modelowanie danych analitycznych – projektowanie struktur hurtowni danych (w tym architektury modeli danych, modeli gwiazdy/płatka śniegu oraz obsługa mechanizmów Slowly Changing Dimensions - SCD).
Konfiguracja i in