Data Engineer

工作内容

Contexte

Nous recherchons un data engineer passionné par les données, les technologies cloud et les solutions innovantes. Vous rejoindrez une équipe dynamique et agile, chargée de concevoir, développer et maintenir des pipelines de données, des architectures de données et des modèles analytiques sur la plateforme Azure.

Tâches

Définir et implémenter des solutions de collecte, de stockage, de transformation et de diffusion des données sur la plateforme Azure, en utilisant des services tels que Azure Data Factory, Azure Databricks, Azure Synapse Analytics, Azure Data Lake, Azure Blob Storage, etc.

Développer et optimiser des requêtes SQL, des scripts Python, des notebooks Spark et des ETL/ELT pour assurer la qualité, la fiabilité et la performance des données

Concevoir, développer et déployer des solutions BI à l’aide de SQL Server Integration Services et de SQL Server Analysis Services.

Capable de concevoir un modèle de données (relationnel, schéma en étoile et coffre de données) en collaboration avec l’architecte de données.

Collaborer avec les data analysts et les business users pour comprendre leurs besoins, leurs cas d’usage et leurs spécifications techniques

Participer à la conception et à la documentation des architectures de données, des modèles de données et des flux de données

Assurer le respect des bonnes pratiques, des normes de sécurité et de confidentialité des données

Veiller à la maintenance, au monitoring et au dépannage des solutions de données

Comp. techniques (must have)

Azure Data components (Data Factory, Synapse Analytic, Analysis Services)

Microsoft BI suite (SSIS, SSAS, SQL Server)

Databricks

Data modeling (Star Schema, Data Vault)

Structured Query Language (T-SQL)

Python and Shell scripting

Comp. techniques (nice to have)

Delta Lake

Power BI

SSRS

Context

Wij zijn op zoek naar een Data Engineer met een passie voor data, cloudtechnologieën en innovatieve oplossingen. Je komt terecht in een dynamisch en agile team, verantwoordelijk voor het ontwerpen, ontwikkelen en onderhouden van data pipelines, data architecturen en analytische modellen op het Azure platform.

Taken

Oplossingen voor het verzamelen, opslaan, transformeren en leveren van gegevens definiëren en implementeren op het Azure-platform, met behulp van services zoals Azure Data Factory, Azure Databricks, Azure Synapse Analytics, Azure Data Lake, Azure Blob Storage, enz.

Ontwikkel en optimaliseer SQL-query’s, Python-scripts, Spark-notebooks en ETL/ELT om de gegevenskwaliteit, betrouwbaarheid en prestaties te garanderen

Ontwerp, ontwikkel en implementeer BI-oplossingen met behulp van SQL Server Integration Services en SQL Server Analysis Services.

In samenwerking met de data architect een datamodel (relationeel, sterschema en datakluis) kunnen ontwerpen.

Werk samen met data-analisten en zakelijke gebruikers om hun behoeften, gebruiksscenario’s en technische specificaties te begrijpen

Neem deel aan het ontwerp en de documentatie van data-architecturen, datamodellen en datastromen

Zorg ervoor dat de best practices, beveiliging en vertrouwelijkheidsnormen voor gegevens worden nageleefd

Zorgen voor het onderhoud, de monitoring en het oplossen van problemen met dataoplossingen

Technische Skills

Azure Data components (Data Factory, Synapse Analytic, Analysis Services)

Microsoft BI suite (SSIS, SSAS, SQL Server)

Databricks

Data modeling (Star Schema, Data Vault)

Structured Query Language (T-SQL)

Python and Shell scripting

Technische Skills

Delta Lake

Power BI

SSRS

Referentie:

CV Uploaden*

• verplicht
  
  

Δ