Tous les articles

Technologie · July 21, 2026 · 8 min de lecture

L'ingénierie de prompts pour les analystes de données : d'abord des définitions précises, puis de la méfiance envers le chiffre

Pour les analystes, un bon prompt est une définition précise d'une métrique — et la compétence consiste à se méfier du résultat jusqu'à ce qu'il tienne la route. Un guide pratique de l'analyse assistée par l'IA qui ne livre pas un chiffre erroné, avec un exemple concret et la façon dont il est évalué.

Par Jakir Patel · Founder, Hanzomon

Partager
Technologie
Sur cette page

Pour un analyste de données, le résultat d'une session avec l'IA est un chiffre — et un chiffre finit collé dans une présentation et transformé en décision. Cela accroît les enjeux du prompting d'une manière bien spécifique : le mode d'échec n'est pas un code laid, c'est une valeur plausible qui, discrètement, ne colle pas. Voici l'entrée consacrée aux analystes dans notre série sur l'ingénierie de prompts par rôle, et c'est l'une des choses les plus clairement révélées par l'AI Sandbox.

Dans l'AI Sandbox, un analyste traite une vraie question avec des outils d'IA — et le signal est de savoir s'il définit la métrique avec précision et se méfie d'un chiffre que les données ne soutiennent pas.

Un bon prompt est une définition précise

Les recherches sur la réduction des hallucinations dans le travail analytique pointent toutes dans la même direction : la spécificité et les limites l'emportent sur une formulation astucieuse. Une demande vague — « donne-moi le chiffre d'affaires par mois » — invite le modèle à choisir une définition à votre place, et il en choisira une qui est plausible mais fausse. Un bon analyste inscrit la métrique, les exclusions et la source de vérité dans le prompt, et donne au modèle la permission explicite de contester plutôt que de deviner. C'est cela la maîtrise de l'IA dans le fauteuil d'un analyste : le prompt et la rigueur analytique sont un seul et même acte.

Un exemple concret

Demandez le chiffre d'affaires net par mois. La version faible s'arrête là. La version forte définit « net », nomme les exclusions, précise quel horodatage compte comme le mois, et dit au modèle de signaler tout ce qu'il ne trouve pas plutôt que d'inventer un nom de colonne. Puis — la partie qui compte vraiment — l'analyste vérifie la cohérence du résultat par rapport à un chiffre auquel il fait déjà confiance avant qu'il ne quitte son écran.

Prompt
## TASK
Write SQL: net revenue by calendar month for 2025.

## DEFINITIONS
- net revenue = gross - refunds
- Exclude internal test accounts (email domain @acme-internal.com)
- "Month" = orders.completed_at, not created_at

## RULES
- If a column I named doesn't exist, tell me — do not guess a name
- Return the query, then list every assumption you made
  • Bon : précise la métrique, les exclusions et la source de vérité ; vérifie la cohérence du résultat ; se méfie d'un chiffre que les données ne soutiennent pas.
  • Faible : accepte une requête plausible, rapporte une valeur qui, discrètement, compte deux fois les remboursements, et ne s'en aperçoit jamais.

Les bonnes pratiques qui font vraiment la différence

  • Définissez avant de demander. Mettez la définition de la métrique, les exclusions et la granularité temporelle dans le prompt — c'est dans l'ambiguïté que naissent les chiffres erronés.
  • Donnez la permission de dire « je ne sais pas ». Dites au modèle de répondre « pas assez de données » ou « cette colonne n'existe pas » plutôt que de deviner. Il hallucine bien moins lorsque le refus est autorisé.
  • Demandez les hypothèses. Faites-lui lister ce qu'il a supposé — c'est là que vous repérerez la définition mal comprise.
  • Vérifiez la cohérence de chaque résultat par rapport à un chiffre auquel vous faites déjà confiance. Une valeur qui ne se réconcilie pas est le constat, pas une erreur d'arrondi.

L'habitude fondamentale de l'analyste n'est pas d'écrire la requête — c'est de refuser de se fier à la réponse tant qu'elle ne se réconcilie pas. Un candidat qui met en doute un agrégat sûr de lui mais trompeur vaut plus que celui qui produit dix requêtes sans en vérifier aucune.

Modes d'échec courants

  • Métrique vague : « chiffre d'affaires » sans définition, alors le modèle en choisit une discrètement.
  • Faire confiance au chiffre parce que la requête a l'air propre — du SQL propre sur une mauvaise définition reste une mauvaise réponse.
  • Ne jamais réconcilier par rapport à un chiffre connu comme fiable, si bien que l'erreur est livrée comme un fait.

Comment nous l'évaluons

On ne peut pas tester cela avec un quiz de connaissances sur les prompts, et on ne peut pas le tester en retirant l'IA — cela ne mesure qu'une tâche que plus personne n'accomplit de cette façon. Vous confiez au candidat une tâche d'analyse réaliste avec des outils à disposition et vous observez s'il définit la métrique, s'il repère l'agrégat trompeur et s'il défend un chiffre qui tient réellement la route — ce que fait justement une évaluation AI Sandbox, et comment la maîtrise de l'IA est notée comme un pilier. Découvrez ce que couvre une évaluation complète d'analyste de données, pourquoi c'est le test honnête du recrutement natif de l'IA, ou regardez la composition d'une évaluation adaptée à un rôle.

Freshness — nothing to look up
Behavioural flags
AI-answer detection
Proctoring (optional, consented)

Layered defence: freshness removes the payoff, and each signal narrows what slips through.

Les meilleurs analystes traitent la réponse de l'IA comme ils traitent tout chiffre surprenant : coupable jusqu'à réconciliation. Cet instinct — et non la formulation du prompt — est ce qui empêche un chiffre erroné d'arriver au conseil d'administration.
Prompt engineeringData analysisAI fluencyAI Sandbox
J

Écrit par

Jakir Patel · Founder, Hanzomon

Building H-Evaluate — AI-native, quality-gated hiring assessments. Writes about assessment engineering, hiring integrity and compliance-first AI.

Questions fréquentes

Pourquoi l'ingénierie de prompts compte-t-elle spécifiquement pour les analystes ?

Parce que le résultat d'un analyste est un chiffre sur lequel quelqu'un va prendre une décision. Si l'IA écrit une requête sur une définition légèrement erronée et que l'analyste ne le remarque pas, l'erreur est livrée comme un fait. La compétence de prompting et le jugement analytique sont le même muscle : définir la métrique avec précision, puis se méfier du résultat jusqu'à ce qu'il tienne la route.

Comment empêcher le modèle d'inventer des colonnes ou des chiffres ?

Vous lui donnez les définitions et les limites dans le prompt, et vous lui donnez explicitement la permission de dire « cette colonne n'existe pas » ou « pas assez de données » plutôt que de deviner. Puis — c'est la partie non négociable — vous vérifiez la cohérence du résultat par rapport à ce que vous savez déjà avant qu'il n'aille où que ce soit.

Comment cela est-il évalué ?

Avec une tâche d'analyse réaliste dans l'AI Sandbox : une vraie question, des données à la forme réaliste, des outils d'IA disponibles. Le signal est de savoir si le candidat précise la métrique et les exclusions, s'il repère un agrégat sûr de lui mais trompeur, et si le chiffre final tient réellement la route — pas s'il connaît des astuces de prompt.

Articles liés

Voyez-le sur votre propre fiche de poste

Rejoignez la liste d'accès anticipé et regardez H-Evaluate créer une évaluation pour un poste réel.

Voyez-le sur votre propre fiche de poste