Définition
Définition et périmètre
Le problème du p-hacking ne tient pas à une malhonnêteté individuelle mais à un cumul silencieux : chaque décision, arrêter l’expérience un peu plus tôt, tester une variable de plus, retirer un participant jugé atypique, peut sembler raisonnable prise isolément, mais leur combinaison non déclarée peut faire grimper le taux de faux positifs jusqu’à plus de 60 % dans certaines simulations, loin des 5 % nominaux attendus par un lecteur non averti.Simmons, 2011 · Ioannidis, 2005
Cette notion décrit un fonctionnement possible, dont l’intensité et les effets varient selon la situation. La reconnaître suppose d’examiner ce qui la déclenche, la fonction qu’elle prend et ce qu’elle produit dans le temps, plutôt que de s’arrêter à une conduite isolée.Simmons, 2011 · Ioannidis, 2005
Comprendre
Mécanisme et fonction
P-hacking dépend de la manière dont l’information est sélectionnée, interprétée et maintenue disponible. Le processus peut être rapide ou réfléchi, volontaire ou partiellement automatique ; ces dimensions doivent être distinguées avant de lui attribuer une cause unique.Ioannidis, 2005 · Chambers, 2013 · Simonsohn, 2014
Son caractère utile ou coûteux dépend moins de sa simple présence que de sa fréquence, de sa souplesse et de son ajustement au contexte. Un fonctionnement ponctuel peut soutenir l’adaptation ; le même fonctionnement, devenu automatique ou exclusif, peut réduire les possibilités de réponse.Ioannidis, 2005 · Chambers, 2013 · Simonsohn, 2014
Observer
Formes et variations
Les exemples rendent la notion plus concrète sans en faire une règle générale. Un même comportement peut remplir une autre fonction dans une autre situation.Ioannidis, 2005 · Chambers, 2013 · Simonsohn, 2014
- Un chercheur teste cinq mesures différentes d’anxiété et ne rapporte dans l’article que la seule mesure devenue significative.
- Une équipe arrête la collecte de données dès qu’un résultat franchit le seuil de significativité, sans avoir fixé cette règle à l’avance.
Distinguer
Notions proches et limites
P-hacking est notamment rapproché de Valeur p (p-value), Comparaisons multiples et Préenregistrement. Ces relations signalent des recouvrements possibles, pas des synonymes : deux notions peuvent produire des conduites semblables tout en différant par leur déclencheur, leur fonction ou leur temporalité.Chambers, 2013 · Simonsohn, 2014
La notion devient peu informative lorsqu’elle est utilisée comme une étiquette globale. Elle gagne au contraire en précision lorsqu’on peut décrire les situations où elle apparaît, les changements qui la modifient et les observations qui contrediraient l’hypothèse.Ioannidis, 2005 · Chambers, 2013 · Simonsohn, 2014
Références
- Chambers, C. D. (2013). Registered reports: A new publishing initiative at Cortex. Cortex, 49(3), 609–610.
- Ioannidis, J. P. A. (2005). Why most published research findings are false. PLoS Medicine, 2(8), e124.
- Simmons, J. P., Nelson, L. D., & Simonsohn, U. (2011). False-positive psychology: Undisclosed flexibility in data collection and analysis allows presenting anything as significant. Psychological Science, 22(11), 1359–1366.
- Simonsohn, U., Nelson, L. D., & Simmons, J. P. (2014). P-curve: A key to the file-drawer. Journal of Experimental Psychology: General, 143(2), 534–547.
Dernière révision documentaire : septembre 2026.