zarządzanie dostępami oraz bezpieczeństwem danych zgodnie z GDPR i wewnętrznymi politykami ochrony danych,
egzekwowanie zasad data lineage i data stewardship,
utrzymywanie dokumentacji technicznej, m.in. data dictionaries, lineage, design specifications i runbooks.
Projektowanie i implementacja end-to-end procesów ETL/ELT oraz workflowów orkiestracji.
Implementacja data contracts oraz zarządzanie ewolucją schematów danych.
Ukázat vše (20)
O pozici / o projektu
Původní popisek.
Dla jednego z naszych klientów szukamy BI Data Engineera , który będzie odpowiedzialny za projektowanie i rozwój procesów ETL/ELT, hurtowni danych, architektury Data Lakehouse oraz rozwiązań BI. To rola łącząca Data Engineering, Business Intelligence, Data Warehousing i Data Governance . Będziesz pracować zarówno nad warstwą danych i pipeline'ami, jak i nad rozwiązaniami raportowymi oraz jakością, lineage i bezpieczeństwem danych.
Data Governance & Security - W ramach roli będziesz również odpowiedzialny/a za:
... and implement large-scale data engineering solutions and enterprise data architectures. - Build and optimize scalable data warehouses, data lakes, and advanced ETL/ELT pipelines. - Ensure the scalability, security, resilience, and performance of critical data platforms. - Troubleshoot complex data processing and performance ...
... Translate business requirements into quality data solutions. - Develop and maintain ETL/ELT processes and data transformations. - Create and develop dashboards and data models in Power BI. - Optimize SQL queries and ensure data quality. - Collaborate with data engineers, analysts, and business users. - Participate in data integration ...
... sprintů. Váš profil: o Bakalářský titul v oboru informatiky, datového inženýrství nebo příbuzného oboru. o Více než 5 let zkušeností s cloudovými platformami pro big data, nejlépe Azure nebo GCP. o Praktické zkušenosti s Databricks, Delta Lake a Spark; znalost Kafka, Flink nebo podobných frameworků je výhodou. o Zkušenosti ...
We're looking for a Middle+ Data/Databricks Engineer to join our data team and take ownership of pipelines built on Databricks. You'll design and run production-grade ETL/ELT workloads, work with the lakehouse (Delta Lake) architecture, and partner closely with analysts, data scientists, and business stakeholders who rely ...
... no-BS & innovative environment. What You’ll Do - Design, develop, and maintain ETL/ELT pipelines to extract, transform, and load data from diverse sources into data lakes and warehouses. - We do hope you’ll bring some Generative AI skills to the table. If not, you’ll get upskilled real fast – the data industry is changing ...
... updating of the insured database based on business requirements, using MS Azure Cloud PaaS services and MS SQL Server. - Onboard new partners and contracts to the ETL platform, including: - Maintain the continuity and reliability of the cloud ETL platform dedicated to importing and processing partner data using Azure Data Factory, ...