Non-Standard Errors - HAL-SHS - Sciences de l'Homme et de la Société
Autre Publication Scientifique Documents de travail du Centre d'Économie de la Sorbonne Année : 2021

Non-Standard Errors

Albert J Menkveld (1) , Anna Dreber (2) , Felix Holzmeister (3) , Juergen Huber (3) , Magnus Johannesson (2) , Michael Kirchler (3) , Sebastian Neusüss (4) , Michael Razen (3) , Utz Weitzel (1) , Gunther Capelle-Blancard (5, 6) , David Abad-Díaz , Menachem Abudy , Tobias Adrian , Yacine Ait-Sahalia , Olivier Akmansoy , Jamie T Alcock , Vitali Alexeev , Arash Aloosh , Livia Amato , Diego Amaya , James J Angel , Alejandro T Avetikian , Amadeus Bach , Edwin Baidoo , Gaetan Bakalli , Bao Li , Andrea Barbon , Oksana Bashchenko , Parampreet C Bindra , Geir H Bjønnes , Jeffrey R Black , Bernard S Black , Dimitar Bogoev , Santiago Bohorquez Correa , Oleg Bondarenko , Charles S Bos , Ciril Bosch-Rosa , Elie Bouri , Christian Brownlees , Anna Calamia , Nga Cao , Laura M Capera Romero , Massimiliano Caporin , Allen Carrion , Tolga Caskurlu , Bidisha Chakrabarty , Jian Chen , Mikhail Chernov , William Cheung , Ludwig B Chincarini , Tarun Chordia , Sheung Chi Chow , Benjamin Clapham , Jean-Edouard Colliard , Carole Comerton-Forde , Edward Curran , Thong Dao , Wale Dare , Ryan J Davies , Riccardo de Blasis , Gianluca F de Nard , Fany Declerck , Oleg Deev , Hans Degryse , Solomon y Deku , Christophe Desagre , Mathijs A van Dijk , Chukwuma Dim , Thomas Dimpfl , Yun Jiang Dong , Philip A Drummond , Tom Dudda , Teodor Duevski , Ariadna Dumitrescu , Teodor Dyakov , Anne Haubo Dyhrberg , Michał Dzieliński , Asli Eksi , Izidin El Kalak , Saskia ter Ellen , Nicolas Eugster , Martin D D Evans , Michael Farrell , Ester Felez-Vinas , Gerardo Ferrara , El Mehdi Ferrouhi , Andrea Flori , Jonathan T Fluharty , Sean D V Foley , Kingsley y L Fong , Thierry Foucault , Tatiana Franus , Francesco Franzoni , Bart Frijns , Michael Frömmel , Servanna M Fu , Sascha C Füllbrunn , Baoqing Gan , Ge Gao , Thomas P Gehrig , Roland Gemayel , Dirk Gerritsen , Javier Gil-Bazo , Dudley Gilder , Lawrence R Glosten
Albert J Menkveld
  • Fonction : Auteur
  • PersonId : 1121132
Felix Holzmeister
  • Fonction : Auteur
  • PersonId : 1121134
Juergen Huber
  • Fonction : Auteur
  • PersonId : 1121135
Michael Kirchler
  • Fonction : Auteur
  • PersonId : 1121136
Michael Razen
  • Fonction : Auteur
  • PersonId : 1121137
David Abad-Díaz
  • Fonction : Auteur
Menachem Abudy
  • Fonction : Auteur
Tobias Adrian
  • Fonction : Auteur
Yacine Ait-Sahalia
  • Fonction : Auteur
Olivier Akmansoy
  • Fonction : Auteur
Jamie T Alcock
  • Fonction : Auteur
Vitali Alexeev
  • Fonction : Auteur
Arash Aloosh
  • Fonction : Auteur
Livia Amato
  • Fonction : Auteur
Diego Amaya
  • Fonction : Auteur
James J Angel
  • Fonction : Auteur
Alejandro T Avetikian
  • Fonction : Auteur
Amadeus Bach
  • Fonction : Auteur
Edwin Baidoo
  • Fonction : Auteur
Gaetan Bakalli
  • Fonction : Auteur
Bao Li
  • Fonction : Auteur
Andrea Barbon
  • Fonction : Auteur
Oksana Bashchenko
  • Fonction : Auteur
Parampreet C Bindra
  • Fonction : Auteur
Geir H Bjønnes
  • Fonction : Auteur
Jeffrey R Black
  • Fonction : Auteur
Bernard S Black
  • Fonction : Auteur
Dimitar Bogoev
  • Fonction : Auteur
Santiago Bohorquez Correa
  • Fonction : Auteur
Oleg Bondarenko
  • Fonction : Auteur
Charles S Bos
  • Fonction : Auteur
Ciril Bosch-Rosa
  • Fonction : Auteur
Elie Bouri
Christian Brownlees
  • Fonction : Auteur
Anna Calamia
  • Fonction : Auteur
Nga Cao
  • Fonction : Auteur
Laura M Capera Romero
  • Fonction : Auteur
Massimiliano Caporin
  • Fonction : Auteur
Allen Carrion
  • Fonction : Auteur
Tolga Caskurlu
  • Fonction : Auteur
Bidisha Chakrabarty
  • Fonction : Auteur
Jian Chen
Mikhail Chernov
  • Fonction : Auteur
William Cheung
  • Fonction : Auteur
Ludwig B Chincarini
  • Fonction : Auteur
Tarun Chordia
  • Fonction : Auteur
Sheung Chi Chow
  • Fonction : Auteur
Benjamin Clapham
  • Fonction : Auteur
Jean-Edouard Colliard
  • Fonction : Auteur
Carole Comerton-Forde
  • Fonction : Auteur
Edward Curran
  • Fonction : Auteur
Thong Dao
  • Fonction : Auteur
Wale Dare
  • Fonction : Auteur
Ryan J Davies
  • Fonction : Auteur
Riccardo de Blasis
  • Fonction : Auteur
Gianluca F de Nard
  • Fonction : Auteur
Fany Declerck
  • Fonction : Auteur
Oleg Deev
  • Fonction : Auteur
Hans Degryse
  • Fonction : Auteur
Solomon y Deku
  • Fonction : Auteur
Christophe Desagre
  • Fonction : Auteur
Mathijs A van Dijk
  • Fonction : Auteur
Chukwuma Dim
  • Fonction : Auteur
Thomas Dimpfl
  • Fonction : Auteur
Yun Jiang Dong
  • Fonction : Auteur
Philip A Drummond
  • Fonction : Auteur
Tom Dudda
  • Fonction : Auteur
Teodor Duevski
  • Fonction : Auteur
Ariadna Dumitrescu
  • Fonction : Auteur
Teodor Dyakov
  • Fonction : Auteur
Anne Haubo Dyhrberg
  • Fonction : Auteur
Michał Dzieliński
  • Fonction : Auteur
Asli Eksi
  • Fonction : Auteur
Izidin El Kalak
  • Fonction : Auteur
Saskia ter Ellen
  • Fonction : Auteur
Nicolas Eugster
  • Fonction : Auteur
Martin D D Evans
  • Fonction : Auteur
Michael Farrell
  • Fonction : Auteur
Ester Felez-Vinas
  • Fonction : Auteur
Gerardo Ferrara
  • Fonction : Auteur
El Mehdi Ferrouhi
  • Fonction : Auteur
Andrea Flori
  • Fonction : Auteur
Jonathan T Fluharty
  • Fonction : Auteur
Sean D V Foley
  • Fonction : Auteur
Kingsley y L Fong
  • Fonction : Auteur
Thierry Foucault
  • Fonction : Auteur
Tatiana Franus
  • Fonction : Auteur
Francesco Franzoni
  • Fonction : Auteur
Bart Frijns
  • Fonction : Auteur
Michael Frömmel
  • Fonction : Auteur
Servanna M Fu
  • Fonction : Auteur
Sascha C Füllbrunn
  • Fonction : Auteur
Baoqing Gan
  • Fonction : Auteur
Ge Gao
  • Fonction : Auteur
Thomas P Gehrig
  • Fonction : Auteur
Roland Gemayel
  • Fonction : Auteur
Dirk Gerritsen
  • Fonction : Auteur
Javier Gil-Bazo
  • Fonction : Auteur
Dudley Gilder
  • Fonction : Auteur
Lawrence R Glosten
  • Fonction : Auteur

Résumé

In statistics, samples are drawn from a population in a data-generating process (DGP). Standard errors measure the uncertainty in sample estimates of population parameters. In science, evidence is generated to test hypotheses in an evidence-generating process (EGP). We claim that EGP variation across researchers adds uncertainty: non-standard errors. To study them, we let 164 teams test six hypotheses on the same sample. We find that non-standard errors are sizeable, on par with standard errors. Their size (i) co-varies only weakly with team merits, reproducibility, or peer rating, (ii) declines significantly after peer-feedback, and (iii) is underestimated by participants.
Fichier principal
Vignette du fichier
21033.pdf (1.41 Mo) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)

Dates et versions

halshs-03500882 , version 1 (13-01-2022)

Identifiants

  • HAL Id : halshs-03500882 , version 1

Citer

Albert J Menkveld, Anna Dreber, Felix Holzmeister, Juergen Huber, Magnus Johannesson, et al.. Non-Standard Errors. 2021. ⟨halshs-03500882⟩
152 Consultations
77 Téléchargements

Partager

More