Data Engineer

Alithya; Montreal (administrative region); On-site; CAD 90,000 - 130,000; Full time

Job summary

Alithya recherche un Data Engineer expérimenté pour concevoir, développer et optimiser des pipelines de données au sein de l’écosystème Azure Databricks, afin d’alimenter les capacités analytiques de l’entreprise.

Vous serez intégré à l’équipe Data Platforms & Tools, dans un contexte de transformation infonuagique, et collaborerez avec les analystes, développeurs et data scientists pour assurer qualité, fiabilité et performance des traitements.

Qualifications

• Minimum de 5 ans d’expérience en Data Engineer.
• Minimum de 4 ans d’expérience avec Azure Databricks.
• Expérience avancée en Python, Spark et PySpark.
• Expérience concrète dans le développement de pipelines d’ingestion et de transformation de données.
• Expérience avec Azure Data Factory, Azure Data Lake ainsi qu’Azure DevOps et les pipelines CI/CD.
• Expérience en modélisation de données, en entrepôts de données et dans la conception de solutions analytiques ou de datamarts.
• Expérience de travail dans un environnement Agile.
• Maîtrise du langage SQL et bonne compréhension des architectures modernes de données infonuagiques.

Responsibilities

• Concevoir, développer et maintenir des pipelines de données robustes et évolutifs.
• Développer les mécanismes d’ingestion de données provenant de multiples sources (API, bases de données, fichiers, services applicatifs, etc.).
• Concevoir et mettre en œuvre les transformations nécessaires pour supporter les besoins analytiques et de reporting.
• Contribuer à la construction de couches analytiques et de datamarts dans l’écosystème Azure Databricks.
• Participer aux initiatives de modernisation des données et à la migration d’applications vers le environnements infonuagiques.
• Analyser les solutions existantes afin d’identifier ce qui doit être conservé, optimisé ou éliminé dans les environnements legacy.
• Optimiser la performance, la qualité et la fiabilité des traitements de données.
• Collaborer étroitement avec les analystes de données, les développeurs, les scientifiques de données, les architectes et les spécialistes Power BI.
• Participer à la définition et à l’application des standards de modélisation, d’intégration et de qualité des données.
• Contribuer aux activités Agile, incluant l’estimation des travaux, la planification et les revues techniques.

Skills

Data engineering

Python

Spark

PySpark

SQL

Agile

Communication

Tools

Azure Databricks

Azure Data Factory

Azure Data Lake

Azure DevOps

CI/CD pipelines

Google BigQuery

Snowflake

Microsoft Fabric

Job description

Votre rôle, votre impact

En tant que spécialiste en données, vous contribuerez directement à l’évolution et à la modernisation des plateformes de données d’entreprise. Vous jouerez un rôle essentiel dans la chaîne de valeur Data & AI en concevant, développant et optimisant des pipelines de données permettant d’alimenter les capacités analytiques de l’organisation.

Vous évoluerez au sein de l’équipe Data Platforms & Tools, dans un contexte de transformation infonuagique, afin de rendre les données accessibles, fiables et exploitables pour les équipes d’affaires, d’analytique et de science des données.

Votre quotidien

Concevoir, développer et maintenir des pipelines de données robustes et évolutifs;

Développer les mécanismes d’ingestion de données provenant de multiples sources (API, bases de données, fichiers, services applicatifs, etc.);

Concevoir et mettre en œuvre les transformations nécessaires pour supporter les besoins analytiques et de reporting;

Contribuer à la construction de couches analytiques et de datamarts dans l’écosystème Azure Databricks;

Participer aux initiatives de modernisation des données et à la migration d’applications vers le environnements infonuagiques;

Analyser les solutions existantes afin d’identifier ce qui doit être conservé, optimisé ou éliminé dans les environnements legacy;

Optimiser la performance, la qualité et la fiabilité des traitements de données;

Collaborer étroitement avec les analystes de données, les développeurs, les scientifiques de données, les architectes et les spécialistes Power BI;

Participer à la définition et à l’application des standards de modélisation, d’intégration et de qualité des données;

Contribuer aux activités Agile, incluant l’estimation des travaux, la planification et les revues techniques.

Les clés de votre réussite

Minimum de 5 ans d’expérience en tant que Data Engineer;

Minimum de 4 ans d’expérience avec Azure Databricks;

Expérience approfondie en Python, Spark et PySpark;

Expérience concrète dans le développement de pipelines d’ingestion et de transformation de données;

Expérience avec Azure Data Factory, Azure Data Lake ainsi qu’Azure DevOps et les pipelines CI/CD;

Expérience en modélisation de données, en entrepôts de données et dans la conception de solutions analytiques ou de datamarts;

Expérience de travail dans un environnement Agile;

Maîtrise du langage SQL et bonne compréhension des architectures modernes de données infonuagiques.

Vos atouts supplémentaires

Expérience avec Google BigQuery, Snowflake, Microsoft Fabric ou d’autres plateformes analytiques modernes;

Expérience dans des contextes de transformation numérique à grande échelle;

Connaissance des meilleures pratiques de qualité, de gouvernance des données, d’environnements de migration ou de modernisation de données;

Capacité à remettre en question les solutions existantes et à proposer des approches optimisées plutôt qu’un simple « lift & shift ».

Compétences linguistiques

Français : Maîtrisé

Anglais : Maîtrisé

Veuillez noter qu’un anglais de niveau maîtrisé est requis en raison de la nature des tâches, notamment pour communiquer de manière quotidienne avec les employés et employées et les gestionnaires hors du Québec.