
Dla naszego klienta poszukujemy kandydatów na stanowisko:
Principal Data Engineer
🏢 Projekt: Tworzenie od podstaw nowoczesnego ekosystemu analityczno-transakcyjnego dla rosnącej firmy technologicznej z Niemiec. Rozwiązanie to łączy wysoce skalowalne strumienie danych, zaawansowany silnik obliczeniowy oraz błyskawiczne przetwarzanie olbrzymich zbiorów informacji.
💻 Stack technologiczny: PostgreSQL, Apache Spark, ClickHouse, architektury HTAP/Lakehouse
🤝 Model współpracy: Praca zdalna z okazjonalnymi wizytami w biurze.
💰 Wynagrodzenie: 38 000 - 48 000 netto+VAT/B2B
🚀 Start współpracy: ASAP
🎯 Zakres obowiązków:
-
Tworzenie i rozwój wydajnej architektury systemów danych, obsługującej bezkompromisowo zarówno skomplikowaną analitykę, jak i duże wolumeny transakcji.
-
Implementacja autorskiego silnika obliczeniowego wspierającego niestandardowe transformacje.
-
Balansowanie obciążeń pomiędzy przetwarzaniem wsadowym a strumieniowym, z naciskiem na minimalizację opóźnień (low-latency) oraz potężną skalowalność horyzontalną.
-
Głęboka optymalizacja zapytań i strategii indeksowania w środowisku PostgreSQL oraz dbałość o wydajność warstwy storage.
-
Rozwój bezpiecznych integracji z zewnętrznymi aplikacjami, modelami uczenia maszynowego (AI/ML) oraz parsowanie zróżnicowanych struktur plików (np. Parquet, CSV).
-
Wdrażanie i utrzymywanie najwyższych standardów inżynieryjnych: obserwowalności (observability), audytowalności, ciągłego monitoringu przepływu danych (data lineage) i migracji schematów.
-
Kształtowanie katalogu danych oraz rozszerzeń SQL na potrzeby zaawansowanych procesów.
🛠️ Oczekujemy:
-
Bogatego doświadczenia w projektowaniu infrastruktury danych i systemów o wysokiej przepustowości.
-
Znajomość programowania asynchronicznego i mechanizmów współbieżności.
-
Eksperckiego opanowania języka SQL oraz mechanizmów silnika PostgreSQL.
-
Zdolności do pełnienia roli głównego architekta przy jednoczesnym, bardzo aktywnym dostarczaniu własnego kodu produkcyjnego (rola silnie hands-on).
-
Doskonałego zrozumienia różnic oraz specyfiki pracy z obciążeniami analitycznymi w kontrze do transakcyjnych (OLAP vs OLTP).
-
Umiejętnego i efektywnego wykorzystywania asystentów AI w codziennym tworzeniu kodu (AI coding agents).
- Doświadczenia pracy w projektach typu greenfield.
🎁 Oferujemy:
-
Realny, decyzyjny wpływ na docelowy kształt architektury dla budowanej od zera platformy enterprise.
-
Współpracę B2B z zagraniczną organizacją (z mocnym zapleczem inżynieryjnym).
-
Elastyczność pracy zdalnej urozmaiconej okazjonalnymi spotkaniami w biurze.