Dans le cadre d'un projet innovant autour de la Data et de l'intelligence artificielle générative, nous recherchons un(e) Analytics Engineer / Data Engineer Senior pour participer à la construction d'un produit de données agrégées (Aggregated Data Product), d'une couche sémantique et d'un agent conversationnel analytique.
L'objectif est de permettre aux utilisateurs d'interroger leurs données en langage naturel via un agent conversationnel connecté à une plateforme BI.
Vous interviendrez à l'interface entre la Data, la Business Intelligence et l'IA générative, avec un rôle essentiel dans la structuration, la qualité, la gouvernance et la performance des données mises à disposition de l'agent.
Vos missions
Construction de la couche sémantique
- Concevoir et structurer les modèles sémantiques LookML.
- Définir des dimensions, mesures et indicateurs métier fiables et sans ambiguïté.
- Structurer les Explores et optimiser les jointures pour éviter les erreurs de calcul et les duplications de données.
- Enrichir les métadonnées avec les descriptions, tags, synonymes et règles de gestion métier.
- Garantir la cohérence entre les données techniques et leur interprétation métier par les modèles d'IA.
Préparation des données pour l'IA générative
- Préparer et structurer les données pour permettre leur exploitation par un LLM.
- Constituer un référentiel de questions métier et de requêtes de référence (Golden Dataset).
- Fournir des exemples représentatifs pour guider les réponses de l'agent conversationnel.
- Participer à l'amélioration de la fiabilité des réponses et à la réduction des hallucinations.
- Contribuer à l'intégration de mécanismes de contextualisation et de RAG si nécessaire.
Data Engineering & optimisation des performances
- Concevoir et faire évoluer les pipelines de données sur GCP / BigQuery.
- Développer et maintenir les transformations de données avec dbt.
- Orchestrer les traitements avec Airflow.
- Construire des jeux de données agrégés et optimisés pour les usages analytiques.
- Mettre en place des mécanismes de pré-agrégation pour accélérer les requêtes.
- Optimiser les performances et les coûts des traitements BigQuery.
Gouvernance et sécurité des données
- Mettre en œuvre les règles de sécurité et de contrôle des accès.
- Configurer les mécanismes de Row-Level Security et les droits d'accès.
- Garantir que l'agent conversationnel respecte les habilitations des utilisateurs.
- Assurer la qualité, la traçabilité et la fiabilité des données exposées
Documentation et collaboration
- Documenter les modèles de données, la couche sémantique et les pipelines.
- Collaborer avec les équipes Data, BI, IA et métiers.
- Participer à la définition des bonnes pratiques et des standards de développement.
- Contribuer à l'amélioration continue de la plateforme analytique.