Senior Data Engineer @ DS STREAM v Česko

Odpovědnosti

Původní popisek. 

1. rozwój oprogramowania do przetwarzania dużych wolumenów danych,
2. integrację i pobieranie danych z interfejsów API,
3. projektowanie oraz rozwój pipeline'ów danych w Databricks z wykorzystaniem PySpark i SQL,
4. tworzenie i utrzymywanie pipeline'ów opartych na Spark Structured Streaming,
5. projektowanie oraz zarządzanie obiektami w Unity Catalog zgodnie z założeniami Medallion Architecture.

O pozici / o projektu

Původní popisek. 

[zdalnie] Senior Data Engineer

Rozwijamy nasz zespół AI Data Engineering w DS STREAM!

Poszukujemy Senior Data Engineera , który dołączy do naszego zespołu i będzie rozwijał nowoczesne rozwiązania oparte o chmurę oraz platformy Big Data.

Praca w 100% zdalna na terenie Polski (z możliwością korzystania z biura w Warszawie).

O projekcie

Dołączysz do projektu rozwijającego dojrzały, wysokodostępny Data Hub zbudowany w oparciu o Azure Databricks . Środowisko wykorzystuje m.in. Unity Catalog , Spark Structured Streaming oraz Asset Bundles , zapewniając wysoką wydajność, bezpieczeństwo i skuteczne zarządzanie danymi.

Architektura rozwiązania oparta jest na modelu Medallion Architecture , który stanowi skalowalny fundament do integracji, przetwarzania i udostępniania nowych źródeł danych w istniejącym ekosystemie.

Oferujemy

• pracę w 100% zdalną z możliwością korzystania z biura w Warszawie,
• elastyczne godziny pracy oraz udział w wydarzeniach integracyjnych,
• dostęp do certyfikacji Azure,
• możliwość rozwijania własnych pomysłów w ramach naszego wewnętrznego inkubatora projektów ,
• współpracę z zespołem ponad 50 doświadczonych konsultantów Data , specjalizujących się w Data Warehouse i Big Data ,
• oraz wiele innych benefitów.

Detail pracovní nabídky

• Online nábor
• Jazyk náboru: Angličtina&Polština
• Ihned
• Práce plně na dálku
• Flexibilní pracovní doba

Metodika práce

• Tester(s)
• Agile management Scrum, Agile
• Knowledge repository
• Code reviews

Výhody v kanceláři

• Bezplatná káva
• Parkování kol
• Vnitřní školení
• Vnitřní hack days
• Moderní kancelář
• Atmosféra startupu
• Bez požadavku na dress code
• Bezplatné nápoje

Výhody

• Remote work
• Competitive compensation
• Sportovní balíček
• Rozpočet na školení
• Soukromá zdravotní péče
• Plochá struktura
• Malé týmy
• Mezinárodní projekty