Wymagania kluczowe:
- Apache Kafka oraz Confluent Cloud (znajomość platformy; certyfikat jest dodatkowym atutem, ale brak go nie dyskwalifikuje)
- Python (praktyczne doświadczenie w inżynierii danych)
- SQL (zaawansowana znajomość i optymalizacja zapytań)
Mile widziane:
- Doświadczenie w projektowaniu systemów w oparciu o architekturę sterowaną zdarzeniami (Event-driven Architecture)
- Znajomość narzędzi do CDC (Change Data Capture)
- Doświadczenie w pracy z GCP (Google Cloud Platform)
- Znajomość baz danych MongoDB
Szukamy doświadczonego Senior Data Enginera, który dołączy do naszego zespołu i wesprze rozwój nowoczesnych, skalowalnych platform danych opartych na architekturze czasu rzeczywistego. Klient kładzie silny nacisk na wysoki poziom senioralny, dlatego w procesie rekrutacyjnym kluczowa będzie nie tylko znajomość technologii, ale również solidna wiedza z zakresu modelowania danych i hurtowni danych.
Warunki zaangażowania:Obszar: Consulting IT
Lokalizacja: 100% zdalnie Delegacje: nie Start: ASAP (akceptujemy kandydatury z max 3msc dostępnością do startu)
Stawka (ustalana indywidualnie): 155 - 175 PLN netto + VAT / h Zaangażowanie: B2B (outsourcing z 1dea), full-time, długofalowo ,[Projektowanie i rozwój strumieniowych potoków danych w czasie rzeczywistym przy użyciu Apache Kafka oraz Confluent Cloud., Tworzenie i optymalizowanie procesów ETL/ELT oraz skryptów przetwarzających dane w języku Python oraz zaawansowanych zapytań SQL., Modelowanie danych analitycznych – projektowanie struktur hurtowni danych (w tym architektury modeli danych, modeli gwiazdy/płatka śniegu oraz obsługa mechanizmów Slowly Changing Dimensions - SCD)., Konfiguracja i integracja źródeł danych z wykorzystaniem narzędzi CDC (Change Data Capture) oraz baz danych takich jak MongoDB., Współpraca przy projektowaniu i wdrażaniu systemów w oparciu o Event-driven Architecture w środowisku chmurowym GCP., Dbanie o wysoką wydajność, skalowalność i niezawodność systemów przetwarzania danych oraz wyznaczanie standardów technicznych w zespole.] Requirements: Python, Cloud, Kafka, ETL, SQL, Data engineering, GCP, MongoDB Additionally: Sport subscription, Private healthcare, Flat structure, Small teams, International projects.