Data Engineer v Praha, Česko

Popis pozice

Co od tebe očekáváme?

• Praktickou zkušenost s Data Engineeringem, Data Science nebo vývojem datových řešení .
• Dobrou znalost Pythonu a schopnost využít jej pro zpracování, transformaci a automatizaci práce s daty.
• Zkušenost s Microsoft Databricks nebo Snowflake .
• Znalost práce s SQL a relačními databázemi.
• Zkušenost s návrhem a vývojem ETL/ELT datových pipeline .
• Orientaci v oblasti datového modelování, DWH a Big Data .
• Zkušenost s některým z nástrojů pro orchestraci datových workflow, například Apache Airflow nebo obdobnou technologií.
• Znalost práce s Git a základní orientaci v CI/CD procesech.
• Zkušenost s cloudovým prostředím, ideálně Microsoft Azure , AWS nebo GCP.
• Znalost formátů a technologií pro integraci dat, například JSON, REST API, Parquet apod.
• Schopnost pracovat s většími objemy dat a přemýšlet nad jejich efektivním zpracováním.
• Samostatnost, analytické myšlení a chuť hledat vhodná technická řešení.

Výhodou bude

• Zkušenost s PySpark / Apache Spark .
• Znalost Delta Lake a konceptu Lakehouse .
• Zkušenost s Azure Data Factory , případně jiným ETL/ELT nástrojem.
• Znalost dbt .
• Zkušenost s Kafka nebo jinými nástroji pro stream processing.
• Základní přehled o Data Governance, Data Quality a bezpečnosti dat.
• Přesah do Machine Learning / Data Science .
• Zkušenost s návrhem cloudových datových platforem.