Teoreetilised füüsikud teevad teadustööde vastastikuse eksperdihinnangu andmisel head tööd, kuid neile kipub rohkem muljet avaldama uute uuringute tähtsus, mitte nende teostamise rangus. See on provokatiivne soovitus uuest uuringust Ühendkuningriigi ja Poola teadlased, mis uurivad teoreetilise füüsika vastastikuse eksperdihinnangu usaldusväärsust.
Vastastikune eksperdihinnang hõlmab uurimistööde saatmist sõltumatutele välisreferentsidele, et otsustada, kas artikkel on teaduslikult usaldusväärne ja sobiv ajakirjale, millele see on esitatud. Hoolimata sellest, et nad on olnud sadade aastate jooksul teaduse keskne osa, on vähesed teadlased saanud vastastikuse eksperdihinnangu alase koolituse ja anekdootlikud tõendid viitavad sellele, et üksikute arvustajate vahelised lahkarvamused paberi osas on tavalised.
"Ideaalses maailmas hindaksid kõik arvustajad iga esitust täiusliku täpsusega ja langetaksid täiusliku otsuse," ütleb Mike Thelwall, Sheffieldi ülikooli andmeteadlane, kes uuringu läbi viis. Kuid arvestades, et ükski töö ei saa olla täiuslik kõigi paberi kvaliteedi hindamiseks kasutatavate mõõdikute osas, teevad retsensendid Thelwalli sõnul "kohtuotsuse" selle kohta, mil määral artikkel saavutab vastuvõetava taseme.
Paberi hindamisel kasutatavad kvaliteedi kolm põhikomponenti on originaalsus, rangus ja olulisus. Samas ütleb Thelwall, et keegi ei olnud varem kontrollinud, kas retsensendid hindavad neid mõõdikuid tõhusalt, kuigi need on näiteks osa Ühendkuningriigi hindajate juhistest. Teadusuuringute tipptaseme raamistik.
Otsustajad
Thelwall ja füüsik Janusz Hołyst Seetõttu analüüsis Varssavi Tehnikaülikooli arvustajate hindeid aastal avaldatud 505 teooriatöös SciPosti füüsika — ajakiri, mis praktiseerib avatud vastastikust eksperdihinnangut. Duo otsustas keskenduda teoreetilisele füüsikale, kuna nende sõnul on see vastastikuse eksperdihinnangu jaoks parim stsenaarium, kuna retsensendid peaksid mõistma tõenäolisemalt antud esituse kõiki aspekte kui teistes teadusvaldkondades.
Uuringu igas artiklis oli vähemalt kaks hindajat ja analüüs näitas, et kõigi kolme põhimõõdiku osas oli retsensentide vahel "mõõdukas" kokkulepe. "Tulemused ei tohiks üldse muretseda SciPosti füüsika — nende arvustajad teevad suurepärast tööd, ”ütleb Thelwall.
Siiski muretseb ta, et ajakirjad, mis avaldavad teadusuuringuid valdkondades, kus üksikutel retsensenditel on raskem mõistlikku otsust teha, võivad arvustajate jaoks olla palju madalamad. "Keskmiste väärtuste seaduse kohaselt kipuvad [nad] tegema mõõdukalt sageli halbu otsuseid arvustajate ebaõnne valiku tõttu," ütleb ta. Autorid soovitavad sellist probleemi minimeerida toimetuse järelevalve, paremate juhiste ja täiustamise kaudu retsensendi koolitus.
Vastastikune eksperdihinnang tähelepanu keskpunktis
Uuringus vaadeldi ka seda, millised kvaliteedinäitajad on üksikute arvustajate hinnangul tavaliselt samad. Tulemused viitavad sellele, et – vähemalt teoreetilises füüsikas – kipuvad kohtunikud rangust madalamaks hindama. See tähendab, et võib olla raskem avaldada seda, mida Thelwall nimetab "väga rangeks originaaluuringuks", kuid lihtsam on "olulise originaaluuringu" aktsepteerimine.
Tegelikult võivad teoreetilistele füüsikutele, kes püüavad luua märkimisväärset tööd, kasu, kui nad keskenduvad originaalsetele ideedele, selle asemel, et luua oma töö toetamiseks ammendavaid tõendeid, soovitavad autorid. "Muidugi vajame igat tüüpi uuringuid ja kui kõik loobuvad rangetest ideedest, on see teadusele katastroof," hoiatab Thelwall.
Stefan ThurnerViini Meditsiiniülikooli füüsik, kes ei osalenud uuringus, kuid on läbi viinud vastastikuse eksperdihinnangu uuringuid, ütleb, et uuring on huvitav. "Toorandmed näitavad, et arvustajad on praktiliselt kõigis kategooriates märkimisväärselt järjekindlad, " ütleb ta. „Enam kui 400-l juhul 505-st ei erine need üldse või ühe punktiühiku võrra. Olen kindel, et paljudel teadlastel on subjektiivne tunne, et kohtunike aruanded erinevad sellest sagedamini.
Thurner lisab siiski, et tulevased uuringud võiksid võrrelda tulemusi näiteks võrdlusmudelitega, milles paberid määrati juhuslikult kohtunikele.
- SEO-põhise sisu ja PR-levi. Võimenduge juba täna.
- PlatoData.Network Vertikaalne generatiivne Ai. Jõustage ennast. Juurdepääs siia.
- PlatoAiStream. Web3 luure. Täiustatud teadmised. Juurdepääs siia.
- PlatoESG. Autod/elektrisõidukid, Süsinik, CleanTech, Energia, Keskkond päikeseenergia, Jäätmekäitluse. Juurdepääs siia.
- BlockOffsets. Keskkonnakompensatsiooni omandi ajakohastamine. Juurdepääs siia.
- Allikas: https://physicsworld.com/a/theorists-are-good-peer-reviewers-but-tend-to-prefer-significance-over-rigour-study-finds/
- :on
- :on
- :mitte
- : kus
- $ UP
- a
- MEIST
- AC
- teadlased
- vastuvõetav
- aktsepteeritud
- täpsus
- Saavutab
- Lisab
- Kokkulepe
- Materjal: BPA ja flataatide vaba plastik
- Ka
- am
- an
- analüüs
- ja
- asjakohane
- OLEME
- valdkondades
- artikkel
- aspektid
- määratud
- At
- autorid
- Halb
- BE
- sest
- olnud
- on
- kasu
- Parem
- vahel
- kuid
- by
- Kutsub
- CAN
- kaasas
- juhtudel
- kategooriad
- Põhjus
- kesk-
- kontrollitud
- valik
- Valisin
- ühine
- võrdlema
- komponendid
- arvuti
- arvutiekraan
- järjepidev
- tuum
- võiks
- Kursus
- looma
- usutav
- andmed
- andmeteadlane
- otsustama
- otsus
- otsused
- Kraad
- Vaatamata
- erinevad
- katastroof
- do
- teeme
- kaks
- iga
- lihtsam
- Juhtkiri
- tõhusalt
- hindama
- Isegi
- igaüks
- tõend
- Uurib
- näide
- Excellence
- suurepärane
- väline
- asjaolu
- vähe
- Valdkonnad
- leidma
- leiab
- Keskenduma
- keskendumine
- eest
- Raamistik
- Alates
- tulevik
- teeniva
- saama
- antud
- annab
- klaas
- hea
- tubli töö
- suunised
- olnud
- raskem
- Olema
- he
- aga
- HTTPS
- sajad
- i
- ideaalne
- ideid
- if
- pilt
- muljet avaldatud
- paranenud
- in
- Teistes
- sõltumatud
- näitama
- eraldi
- info
- huvitav
- sisse
- seotud
- probleem
- IT
- töö
- ajakiri
- jpg
- kohtunik
- Võti
- Seadus
- kõige vähem
- Tase
- Tõenäoliselt
- Vaatasin
- vähendada
- tegema
- palju
- max laiuse
- mai..
- vahendid
- meetmed
- meditsiini-
- Meetrika
- võib
- mudelid
- mõõdukalt
- rohkem
- palju
- Vajadus
- Uus
- ei
- of
- sageli
- on
- ONE
- avatud
- or
- originaal
- Originaalsus
- Muu
- välja
- üle
- Järelevalve
- Paber
- dokumendid
- osa
- peer
- täiuslik
- Füüsika
- Füüsika maailm
- Platon
- Platoni andmete intelligentsus
- PlatoData
- Poola
- praktiliselt
- eelistama
- varem
- avaldama
- avaldatud
- Kirjastamine
- kvaliteet
- auaste
- reastatud
- Rates
- pigem
- Töötlemata
- usaldusväärsus
- Aruanded
- teadustöö
- Teadlased
- Tulemused
- Revealed
- läbi
- läbivaatamine
- rangelt
- sama
- ütlema
- ütleb
- teadus
- teaduslik
- teadlane
- teadlased
- skoor
- Hinded
- Ekraan
- saatmine
- peaks
- tähendus
- märkimisväärne
- heli
- uuringud
- Uuring
- esitamine
- esitatud
- selline
- soovitama
- Soovitab
- toetama
- kindel
- Tehnoloogia
- kui
- et
- .
- seadus
- Suurbritannia
- oma
- teoreetiline
- teooria
- seetõttu
- Need
- nad
- see
- kuigi?
- kolm
- thumbnail
- et
- koolitatud
- tõsi
- kaks
- liigid
- Uk
- all
- mõistma
- üksus
- Ülikool
- Kasutatud
- kaudu
- Varssavi
- oli
- we
- olid
- M
- millal
- mis
- WHO
- will
- koos
- Töö
- maailm
- oleks
- aastat
- sephyrnet