In this paper we focus on the analysis of peer reviews and reviewers behaviour in a number of different review processes. More specifically, we report on the development, definition and rationale of a number of appropriate quantitative metrics to assess the processes main properties. We then apply the proposed metrics and analysis framework to data sets from conference evaluation processes and we discuss the results implications and their eventual use toward improving the analyzed peer review processes. A number of unexpected results were found, in particular: (1) the low correlation between peer review outcome and impact in time of the accepted contributions and (2) the presence of a high level of randomness in the analyzed peer review processes
Scheda prodotto non validato
I dati visualizzati non sono stati ancora sottoposti a validazione formale da parte dello Staff di IRIS, ma sono stati ugualmente trasmessi al Sito Docente Cineca (Loginmiur).
Titolo: | A Quantitative Analysis of Peer Review | |
Autori: | A., Ragone; Mirylenka, Katsiaryna; Casati, Fabio; Marchese, Maurizio | |
Autori Unitn: | ||
Autore/i del libro: | AA. VV. | |
Titolo del volume contenente il saggio: | Proceedings of ISSI 2011 | |
Luogo di edizione: | Leuven, Belgium | |
Casa editrice: | ISSI | |
Anno di pubblicazione: | 2011 | |
Codice identificativo WOS: | WOS:000305337100075 | |
ISBN: | 9789081752701 | |
Handle: | http://hdl.handle.net/11572/100744 | |
Appare nelle tipologie: | 04.1 Saggio in atti di convegno (Paper in Proceedings) |