Fisikawan teoretis melakukan tugasnya dengan baik ketika melakukan tinjauan sejawat terhadap makalah ilmiah, tetapi cenderung lebih terkesan dengan pentingnya penelitian baru daripada ketelitian dalam melakukan penelitian tersebut. Itu adalah saran yang provokatif dari sebuah studi baru dilakukan oleh para peneliti di Inggris dan Polandia yang meneliti keandalan peer review dalam fisika teoretis.
Tinjauan sejawat melibatkan pengiriman makalah penelitian ke pemberi referensi eksternal yang independen untuk memutuskan apakah sebuah artikel kredibel secara ilmiah dan sesuai untuk jurnal tempat artikel tersebut dikirimkan. Meskipun telah menjadi bagian penting dari ilmu pengetahuan selama ratusan tahun, hanya sedikit akademisi yang dilatih dalam tinjauan sejawat, dan bukti berdasarkan pengalaman menunjukkan bahwa perselisihan pendapat antar individu pengulas mengenai sebuah makalah adalah hal biasa.
“Dalam dunia yang ideal, semua peninjau akan mengevaluasi setiap kiriman dengan akurasi sempurna dan memberikan keputusan yang sempurna,” katanya Mike Thelwall, seorang ilmuwan data dari Universitas Sheffield, yang melakukan penelitian tersebut. Namun mengingat tidak ada karya yang sempurna dalam semua metrik yang digunakan untuk menilai kualitas sebuah makalah, para pengulas menjadikan apa yang disebut Thelwall sebagai “panggilan penilaian” tentang sejauh mana sebuah artikel mencapai tingkat yang dapat diterima.
Tiga komponen inti kualitas yang digunakan untuk menilai sebuah makalah adalah orisinalitas, ketelitian, dan signifikansi. Namun, Thelwall mengatakan bahwa belum ada seorang pun yang pernah memeriksa apakah pengulas menilai metrik ini secara efektif, meskipun metrik tersebut, misalnya, merupakan bagian dari pedoman bagi penilai di Inggris. Kerangka Keunggulan Penelitian.
Pembuat keputusan
Thelwall dan fisikawan Janusz Hołyst Oleh karena itu, Universitas Teknologi Warsawa menganalisis skor pengulas dalam 505 makalah teori yang diterbitkan di Fisika SciPost — jurnal yang mempraktikkan peer review terbuka. Duo ini memilih untuk fokus pada fisika teoretis karena menurut mereka ini adalah skenario kasus terbaik untuk tinjauan sejawat, karena pengulas harus lebih memahami semua aspek dari kiriman tertentu dibandingkan bidang sains lainnya.
Setiap makalah dalam penelitian ini memiliki setidaknya dua peninjau penilaian dan analisis menunjukkan tingkat kesepakatan “sedang” antara peninjau pada ketiga metrik utama. “Hasilnya seharusnya tidak menimbulkan kekhawatiran sama sekali Fisika SciPost — pengulas mereka melakukan pekerjaannya dengan sangat baik,” kata Thelwall.
Namun, ia khawatir bahwa jurnal yang menerbitkan penelitian di bidang yang sulit bagi pengulas individu untuk membuat penilaian yang masuk akal mungkin memiliki tingkat persetujuan yang jauh lebih rendah bagi pengulas. “Berdasarkan hukum rata-rata, [mereka mungkin] cenderung membuat keputusan yang buruk cukup sering karena pilihan pengulas yang tidak beruntung,” katanya. Para penulis menyarankan agar masalah seperti ini dapat diminimalkan melalui pengawasan editorial, pedoman yang lebih baik, dan perbaikan pelatihan pengulas.
Tinjauan sejawat menjadi sorotan
Studi ini juga mengamati ukuran kualitas mana yang cenderung diberi peringkat sama oleh masing-masing peninjau. Hasilnya menunjukkan bahwa - setidaknya dalam teori fisika - wasit cenderung memberi peringkat lebih rendah pada ketelitian. Artinya, akan lebih sulit untuk mempublikasikan apa yang disebut Thelwall sebagai “studi orisinal yang sangat teliti”, namun lebih mudah untuk mendapatkan “studi orisinal yang signifikan” yang diterima.
Faktanya, fisikawan teoretis yang berupaya menciptakan karya signifikan mungkin mendapat manfaat dari fokus pada ide-ide orisinal daripada menghasilkan bukti lengkap untuk mendukung karya mereka, saran para penulis. “Tentu saja, kita memerlukan semua jenis penelitian dan jika semua orang menyerah pada ide-ide yang kuat, hal ini akan menjadi bencana bagi sains,” Thelwall memperingatkan.
Stefan Thurner, seorang ahli fisika dari Universitas Kedokteran Wina yang tidak terlibat dalam penelitian ini tetapi telah melakukan penelitian melalui peer review, mengatakan penelitian ini menarik. “Data mentah menunjukkan bahwa para pengulas sangat konsisten di hampir semua kategori,” katanya. “Pada lebih dari 400 dari 505 kasus, tidak ada perbedaan sama sekali atau hanya satu unit skor. Saya yakin banyak ilmuwan mempunyai perasaan subyektif bahwa laporan para wasit lebih sering berbeda dari itu.”
Thurner menambahkan, bagaimanapun, bahwa penelitian di masa depan dapat membandingkan hasilnya dengan, misalnya, model referensi di mana makalah secara acak ditugaskan ke juri.
- Konten Bertenaga SEO & Distribusi PR. Dapatkan Amplifikasi Hari Ini.
- PlatoData.Jaringan Vertikal Generatif Ai. Berdayakan Diri Anda. Akses Di Sini.
- PlatoAiStream. Intelijen Web3. Pengetahuan Diperkuat. Akses Di Sini.
- PlatoESG. Otomotif / EV, Karbon, teknologi bersih, energi, Lingkungan Hidup, Tenaga surya, Penanganan limbah. Akses Di Sini.
- BlockOffset. Modernisasi Kepemilikan Offset Lingkungan. Akses Di Sini.
- Sumber: https://physicsworld.com/a/theorists-are-good-peer-reviewers-but-tend-to-prefer-significance-over-rigour-study-finds/
- :memiliki
- :adalah
- :bukan
- :Di mana
- $NAIK
- a
- Tentang Kami
- AC
- akademisi
- diterima
- diterima
- ketepatan
- Mencapai
- Menambahkan
- Persetujuan
- Semua
- juga
- am
- an
- analisis
- dan
- sesuai
- ADALAH
- daerah
- artikel
- aspek
- ditugaskan
- At
- penulis
- Buruk
- BE
- karena
- menjadi
- makhluk
- manfaat
- Lebih baik
- antara
- tapi
- by
- Panggilan
- CAN
- dilakukan
- kasus
- kategori
- Menyebabkan
- pusat
- diperiksa
- pilihan
- memilih
- Umum
- membandingkan
- komponen
- komputer
- layar komputer
- konsisten
- Core
- bisa
- Kelas
- membuat
- kredibel
- data
- ilmuwan data
- memutuskan
- keputusan
- keputusan
- Derajat
- Meskipun
- berbeda
- bencana
- do
- melakukan
- dua
- setiap
- mudah
- Tajuk rencana
- efektif
- mengevaluasi
- Bahkan
- semua orang
- bukti
- Memeriksa
- contoh
- Keunggulan
- unggul
- luar
- fakta
- beberapa
- Fields
- Menemukan
- menemukan
- Fokus
- berfokus
- Untuk
- Kerangka
- dari
- masa depan
- menghasilkan
- mendapatkan
- diberikan
- memberikan
- kaca
- baik
- pekerjaan yang baik
- pedoman
- memiliki
- sulit
- Memiliki
- he
- Namun
- HTTPS
- Ratusan
- i
- ideal
- ide-ide
- if
- gambar
- terkesan
- ditingkatkan
- in
- Di lain
- independen
- menunjukkan
- sendiri-sendiri
- informasi
- menarik
- ke
- terlibat
- isu
- IT
- Pekerjaan
- majalah
- jpg
- hakim
- kunci
- Hukum
- paling sedikit
- Tingkat
- Mungkin
- tampak
- menurunkan
- membuat
- banyak
- max-width
- Mungkin..
- cara
- ukuran
- medis
- Metrik
- mungkin
- model
- sedang
- lebih
- banyak
- Perlu
- New
- tidak
- of
- sering
- on
- ONE
- Buka
- or
- asli
- keaslian
- Lainnya
- di luar
- lebih
- Kelalaian
- kertas
- dokumen
- bagian
- buah pir
- sempurna
- Fisika
- Dunia Fisika
- plato
- Kecerdasan Data Plato
- Data Plato
- Polandia
- praktis
- lebih suka
- sebelumnya
- menerbitkan
- diterbitkan
- Penerbitan
- kualitas
- peringkat
- peringkat
- Tarif
- agak
- Mentah
- keandalan
- laporan
- penelitian
- peneliti
- Hasil
- Terungkap
- ulasan
- meninjau
- keras
- sama
- mengatakan
- mengatakan
- Ilmu
- ilmiah
- ilmuwan
- ilmuwan
- skor
- mencetak gol
- Layar
- mengirim
- harus
- makna
- penting
- Suara
- studi
- Belajar
- pengajuan
- disampaikan
- seperti itu
- menyarankan
- Menyarankan
- mendukung
- yakin
- Teknologi
- dari
- bahwa
- Grafik
- hukum
- Inggris
- mereka
- teoretis
- teori
- karena itu
- Ini
- mereka
- ini
- meskipun?
- tiga
- kuku ibu jari
- untuk
- terlatih
- benar
- dua
- jenis
- Uk
- bawah
- memahami
- satuan
- universitas
- bekas
- melalui
- Warsaw
- adalah
- we
- adalah
- Apa
- ketika
- yang
- SIAPA
- akan
- dengan
- Kerja
- dunia
- akan
- tahun
- zephyrnet.dll