Vérifie les sources IA avec le test CRAP

Comment lancer la vérification

Colle la réponse de l'IA dans le chat et donne une consigne précise : "Vérifie toutes les affirmations factuelles et toutes les sources de cette réponse avec le test CRAP. Crée un tableau avec affirmation, source, Currency, Reliability, Authority, Purpose/Point of View, signaux d'alerte et verdict. Signale clairement les preuves manquantes ou inaccessibles et privilégie les sources primaires."

Ne te contente pas d'une appréciation générale des liens. Demande à l'IA de relier chaque affirmation concrète à une source. Tout ce qui n'a pas de preuve reçoit une ligne séparée avec le verdict "non étayé".

Les quatre questions

C signifie Currency : la source est-elle assez récente pour cette affirmation ? Pour le droit, la santé, les prix, les logiciels et les modèles d'IA, la date compte beaucoup.

R signifie Reliability : peux-tu retracer l'origine de l'information ? Les bons signaux sont une méthode claire, des données originales, des preuves explicites et des citations vérifiables.

A signifie Authority : qui est derrière la source ? Vérifie l'auteur, l'éditeur, l'expertise et les éventuels conflits d'intérêts.

P signifie Purpose ou Point of View : pourquoi la source a-t-elle été publiée ? Publicité, opinion, lobbying ou tunnel de vente ne disqualifient pas automatiquement une source, mais ce sont des signaux d'alerte.

Un meilleur prompt

Faible : "Vérifie tes sources."

Mieux : "Liste chaque affirmation séparément, indique la meilleure source primaire disponible et évalue-la avec CRAP. Termine par trois points courts : ce qui est bien étayé, ce qui reste incertain et ce que je dois vérifier manuellement."

Tu obtiens ainsi une vraie liste de vérification, pas seulement un paragraphe rassurant.

Bon à savoir

CRAP et CRAAP sont proches, mais pas identiques. CRAAP ajoute Relevance et utilise Accuracy au lieu de Reliability. Pour une vérification rapide des réponses IA, CRAP est souvent plus facile à mémoriser et à appliquer.

Un verdict d'IA ne prouve rien à lui seul. Ouvre les liens importants, vérifie la date, l'auteur et le contexte, et ne base pas une décision critique sur un simple score.