Non-Standard Errors
Albert J Menkveld
(1)
,
Anna Dreber
(2)
,
Felix Holzmeister
(3)
,
Juergen Huber
(3)
,
Magnus Johannesson
(2)
,
Michael Kirchler
(3)
,
Sebastian Neusüss
(4)
,
Michael Razen
(3)
,
Utz Weitzel
(1)
,
Gunther Capelle-Blancard
(5, 6)
,
David Abad-Díaz
,
Menachem Abudy
,
Tobias Adrian
,
Yacine Ait-Sahalia
,
Olivier Akmansoy
,
Jamie T Alcock
,
Vitali Alexeev
,
Arash Aloosh
,
Livia Amato
,
Diego Amaya
,
James J Angel
,
Alejandro T Avetikian
,
Amadeus Bach
,
Edwin Baidoo
,
Gaetan Bakalli
,
Bao Li
,
Andrea Barbon
,
Oksana Bashchenko
,
Parampreet C Bindra
,
Geir H Bjønnes
,
Jeffrey R Black
,
Bernard S Black
,
Dimitar Bogoev
,
Santiago Bohorquez Correa
,
Oleg Bondarenko
,
Charles S Bos
,
Ciril Bosch-Rosa
,
Elie Bouri
,
Christian Brownlees
,
Anna Calamia
,
Nga Cao
,
Laura M Capera Romero
,
Massimiliano Caporin
,
Allen Carrion
,
Tolga Caskurlu
,
Bidisha Chakrabarty
,
Jian Chen
,
Mikhail Chernov
,
William Cheung
,
Ludwig B Chincarini
,
Tarun Chordia
,
Sheung Chi Chow
,
Benjamin Clapham
,
Jean-Edouard Colliard
,
Carole Comerton-Forde
,
Edward Curran
,
Thong Dao
,
Wale Dare
,
Ryan J Davies
,
Riccardo de Blasis
,
Gianluca F de Nard
,
Fany Declerck
,
Oleg Deev
,
Hans Degryse
,
Solomon y Deku
,
Christophe Desagre
,
Mathijs A van Dijk
,
Chukwuma Dim
,
Thomas Dimpfl
,
Yun Jiang Dong
,
Philip A Drummond
,
Tom Dudda
,
Teodor Duevski
,
Ariadna Dumitrescu
,
Teodor Dyakov
,
Anne Haubo Dyhrberg
,
Michał Dzieliński
,
Asli Eksi
,
Izidin El Kalak
,
Saskia ter Ellen
,
Nicolas Eugster
,
Martin D D Evans
,
Michael Farrell
,
Ester Felez-Vinas
,
Gerardo Ferrara
,
El Mehdi Ferrouhi
,
Andrea Flori
,
Jonathan T Fluharty
,
Sean D V Foley
,
Kingsley y L Fong
,
Thierry Foucault
,
Tatiana Franus
,
Francesco Franzoni
,
Bart Frijns
,
Michael Frömmel
,
Servanna M Fu
,
Sascha C Füllbrunn
,
Baoqing Gan
,
Ge Gao
,
Thomas P Gehrig
,
Roland Gemayel
,
Dirk Gerritsen
,
Javier Gil-Bazo
,
Dudley Gilder
,
Lawrence R Glosten
Anna Dreber
- Fonction : Auteur
- PersonId : 1121133
Magnus Johannesson
- Fonction : Auteur
- PersonId : 921398
Gunther Capelle-Blancard
- Fonction : Auteur
- PersonId : 8081
- IdHAL : gunther-capelle-blancard
- ORCID : 0000-0001-5688-0113
- IdRef : 050807390
David Abad-Díaz
- Fonction : Auteur
Menachem Abudy
- Fonction : Auteur
Tobias Adrian
- Fonction : Auteur
Yacine Ait-Sahalia
- Fonction : Auteur
Olivier Akmansoy
- Fonction : Auteur
Jamie T Alcock
- Fonction : Auteur
Vitali Alexeev
- Fonction : Auteur
Arash Aloosh
- Fonction : Auteur
Livia Amato
- Fonction : Auteur
Diego Amaya
- Fonction : Auteur
James J Angel
- Fonction : Auteur
Alejandro T Avetikian
- Fonction : Auteur
Amadeus Bach
- Fonction : Auteur
Edwin Baidoo
- Fonction : Auteur
Gaetan Bakalli
- Fonction : Auteur
Bao Li
- Fonction : Auteur
Andrea Barbon
- Fonction : Auteur
Oksana Bashchenko
- Fonction : Auteur
Parampreet C Bindra
- Fonction : Auteur
Geir H Bjønnes
- Fonction : Auteur
Jeffrey R Black
- Fonction : Auteur
Bernard S Black
- Fonction : Auteur
Dimitar Bogoev
- Fonction : Auteur
Santiago Bohorquez Correa
- Fonction : Auteur
Oleg Bondarenko
- Fonction : Auteur
Charles S Bos
- Fonction : Auteur
Ciril Bosch-Rosa
- Fonction : Auteur
Elie Bouri
- Fonction : Auteur
- PersonId : 779059
- ORCID : 0000-0003-2628-5027
Christian Brownlees
- Fonction : Auteur
Anna Calamia
- Fonction : Auteur
Nga Cao
- Fonction : Auteur
Laura M Capera Romero
- Fonction : Auteur
Massimiliano Caporin
- Fonction : Auteur
Allen Carrion
- Fonction : Auteur
Tolga Caskurlu
- Fonction : Auteur
Bidisha Chakrabarty
- Fonction : Auteur
Jian Chen
- Fonction : Auteur
- PersonId : 763895
- ORCID : 0000-0001-8670-6984
Mikhail Chernov
- Fonction : Auteur
William Cheung
- Fonction : Auteur
Ludwig B Chincarini
- Fonction : Auteur
Tarun Chordia
- Fonction : Auteur
Sheung Chi Chow
- Fonction : Auteur
Benjamin Clapham
- Fonction : Auteur
Jean-Edouard Colliard
- Fonction : Auteur
Carole Comerton-Forde
- Fonction : Auteur
Edward Curran
- Fonction : Auteur
Thong Dao
- Fonction : Auteur
Wale Dare
- Fonction : Auteur
Ryan J Davies
- Fonction : Auteur
Riccardo de Blasis
- Fonction : Auteur
Gianluca F de Nard
- Fonction : Auteur
Fany Declerck
- Fonction : Auteur
Oleg Deev
- Fonction : Auteur
Hans Degryse
- Fonction : Auteur
Solomon y Deku
- Fonction : Auteur
Christophe Desagre
- Fonction : Auteur
Mathijs A van Dijk
- Fonction : Auteur
Chukwuma Dim
- Fonction : Auteur
Thomas Dimpfl
- Fonction : Auteur
Yun Jiang Dong
- Fonction : Auteur
Philip A Drummond
- Fonction : Auteur
Tom Dudda
- Fonction : Auteur
Teodor Duevski
- Fonction : Auteur
Ariadna Dumitrescu
- Fonction : Auteur
Teodor Dyakov
- Fonction : Auteur
Anne Haubo Dyhrberg
- Fonction : Auteur
Michał Dzieliński
- Fonction : Auteur
Asli Eksi
- Fonction : Auteur
Izidin El Kalak
- Fonction : Auteur
Saskia ter Ellen
- Fonction : Auteur
Nicolas Eugster
- Fonction : Auteur
Martin D D Evans
- Fonction : Auteur
Michael Farrell
- Fonction : Auteur
Ester Felez-Vinas
- Fonction : Auteur
Gerardo Ferrara
- Fonction : Auteur
El Mehdi Ferrouhi
- Fonction : Auteur
Andrea Flori
- Fonction : Auteur
Jonathan T Fluharty
- Fonction : Auteur
Sean D V Foley
- Fonction : Auteur
Kingsley y L Fong
- Fonction : Auteur
Thierry Foucault
- Fonction : Auteur
Tatiana Franus
- Fonction : Auteur
Francesco Franzoni
- Fonction : Auteur
Bart Frijns
- Fonction : Auteur
Michael Frömmel
- Fonction : Auteur
Servanna M Fu
- Fonction : Auteur
Sascha C Füllbrunn
- Fonction : Auteur
Baoqing Gan
- Fonction : Auteur
Ge Gao
- Fonction : Auteur
Thomas P Gehrig
- Fonction : Auteur
Roland Gemayel
- Fonction : Auteur
Dirk Gerritsen
- Fonction : Auteur
Javier Gil-Bazo
- Fonction : Auteur
Dudley Gilder
- Fonction : Auteur
Lawrence R Glosten
- Fonction : Auteur
Résumé
In statistics, samples are drawn from a population in a data-generating process (DGP). Standard errors measure the uncertainty in sample estimates of population parameters. In science, evidence is generated to test hypotheses in an evidence-generating process (EGP). We claim that EGP variation across researchers adds uncertainty: non-standard errors. To study them, we let 164 teams test six hypotheses on the same sample. We find that non-standard errors are sizeable, on par with standard errors. Their size (i) co-varies only weakly with team merits, reproducibility, or peer rating, (ii) declines significantly after peer-feedback, and (iii) is underestimated by participants.
Format du dépôt | Fichier |
---|---|
Type de dépôt | Autre publication scientifique |
Titre |
en
Non-Standard Errors
|
Résumé |
en
In statistics, samples are drawn from a population in a data-generating process (DGP). Standard errors measure the uncertainty in sample estimates of population parameters. In science, evidence is generated to test hypotheses in an evidence-generating process (EGP). We claim that EGP variation across researchers adds uncertainty: non-standard errors. To study them, we let 164 teams test six hypotheses on the same sample. We find that non-standard errors are sizeable, on par with standard errors. Their size (i) co-varies only weakly with team merits, reproducibility, or peer rating, (ii) declines significantly after peer-feedback, and (iii) is underestimated by participants.
|
Auteur(s) |
Albert J Menkveld
1
, Anna Dreber
2
, Felix Holzmeister
3
, Juergen Huber
3
, Magnus Johannesson
2
, Michael Kirchler
3
, Sebastian Neusüss
4
, Michael Razen
3
, Utz Weitzel
1
, Gunther Capelle-Blancard
5, 6
, David Abad-Díaz
, Menachem Abudy
, Tobias Adrian
, Yacine Ait-Sahalia
, Olivier Akmansoy
, Jamie T Alcock
, Vitali Alexeev
, Arash Aloosh
, Livia Amato
, Diego Amaya
, James J Angel
, Alejandro T Avetikian
, Amadeus Bach
, Edwin Baidoo
, Gaetan Bakalli
, Bao Li
, Andrea Barbon
, Oksana Bashchenko
, Parampreet C Bindra
, Geir H Bjønnes
, Jeffrey R Black
, Bernard S Black
, Dimitar Bogoev
, Santiago Bohorquez Correa
, Oleg Bondarenko
, Charles S Bos
, Ciril Bosch-Rosa
, Elie Bouri
, Christian Brownlees
, Anna Calamia
, Nga Cao
, Laura M Capera Romero
, Massimiliano Caporin
, Allen Carrion
, Tolga Caskurlu
, Bidisha Chakrabarty
, Jian Chen
, Mikhail Chernov
, William Cheung
, Ludwig B Chincarini
, Tarun Chordia
, Sheung Chi Chow
, Benjamin Clapham
, Jean-Edouard Colliard
, Carole Comerton-Forde
, Edward Curran
, Thong Dao
, Wale Dare
, Ryan J Davies
, Riccardo de Blasis
, Gianluca F de Nard
, Fany Declerck
, Oleg Deev
, Hans Degryse
, Solomon y Deku
, Christophe Desagre
, Mathijs A van Dijk
, Chukwuma Dim
, Thomas Dimpfl
, Yun Jiang Dong
, Philip A Drummond
, Tom Dudda
, Teodor Duevski
, Ariadna Dumitrescu
, Teodor Dyakov
, Anne Haubo Dyhrberg
, Michał Dzieliński
, Asli Eksi
, Izidin El Kalak
, Saskia ter Ellen
, Nicolas Eugster
, Martin D D Evans
, Michael Farrell
, Ester Felez-Vinas
, Gerardo Ferrara
, El Mehdi Ferrouhi
, Andrea Flori
, Jonathan T Fluharty
, Sean D V Foley
, Kingsley y L Fong
, Thierry Foucault
, Tatiana Franus
, Francesco Franzoni
, Bart Frijns
, Michael Frömmel
, Servanna M Fu
, Sascha C Füllbrunn
, Baoqing Gan
, Ge Gao
, Thomas P Gehrig
, Roland Gemayel
, Dirk Gerritsen
, Javier Gil-Bazo
, Dudley Gilder
, Lawrence R Glosten
1
VU -
Vrije Universiteit Amsterdam [Amsterdam]
( 62433 )
- De Boelelaan 1105 1081 HV Amsterdam
- Pays-Bas
2
Stockholm School of Economics - Department of Economics
( 1083680 )
- P.O. Box 6501
Sveavagen 65
S-113 83 Stockholm
Sweden
- Suède
3
Universität Innsbruck [Innsbruck]
( 226037 )
- Innrain 52, 6020 Innsbruck
- Autriche
4
Aalto University
( 1083684 )
- P.O. Box 21210
Helsinki, 00101
Finland
- Finlande
5
UP1 -
Université Paris 1 Panthéon-Sorbonne
( 7550 )
- 12 place du Panthéon, 75231 Paris Cedex 05
- France
6
CES -
Centre d'économie de la Sorbonne
( 15080 )
- Maison des Sciences Économiques - 106-112 Boulevard de l'Hôpital - 75647 Paris Cedex 13
- France
|
Langue du document |
Anglais
|
Nom de la revue |
|
Vulgarisation |
Non
|
Date de publication |
2021-11
|
Description |
Documents de travail du Centre d'Economie de la Sorbonne 2021.33 - ISSN : 1955-611X
Voir aussi ce document de travail sur SSRN: https://ssrn.com/abstract=3981597 |
Commentaire |
URL des documents de travail : https://centredeconomiesorbonne.cnrs.fr/publications/
|
Domaine(s) |
|
Mots-clés (JEL) |
|
Éditeur scientifique |
|
Voir aussi |
|
Mots-clés |
en
non-standard errors, multi-analyst approach, liquidity
|
Origine :
Fichiers produits par l'(les) auteur(s)
Loading...