Yapay zekaya odaklanan akademisyenler, meslektaşlarının makine öğrenimi çalışmalarını gözden geçirmelerine yardımcı olmak için üretken yapay zekayı kullanmaya başladı.
Stanford Üniversitesi, NEC Labs America ve UC Santa Barbara'dan bir grup araştırmacı yakın zamanda ICLR 2024, NeurIPS 2023, CoRL 2023 ve EMNLP 2023 dahil olmak üzere önde gelen AI konferanslarına gönderilen makalelerin hakem değerlendirmelerini analiz etti.
Yazarlar - Weixin Liang, Zachary Izzo, Yaohui Zhang, Haley Lepp, Hancheng Cao, Xuandong Zhao, Lingjiao Chen, Haotian Ye, Sheng Liu, Zhi Huang, Daniel A McFarland ve James Y Zou - bulgularını şu şekilde bildirdiler: Kağıt "Yapay Zeka ile Değiştirilmiş İçeriğin Geniş Ölçekte İzlenmesi: ChatGPT'nin Yapay Zeka Konferansı Akran İncelemeleri Üzerindeki Etkisine İlişkin Bir Örnek Olay" başlıklı.
Araştırmayı, geçen yıl teknik söylemde hakim olan geniş dil modellerine olan kamu ilgisine ve bu modeller hakkındaki tartışmalara dayanarak gerçekleştirdiler.
Yazarlar, son teslim tarihinden üç gün veya daha kısa bir süre önce gönderilen incelemeler için görünen LLM kullanımında küçük ama tutarlı bir artış buldular
İnsan ve makine tarafından yazılan metinleri birbirinden ayırmanın zorluğu ve bildirilen artış Yapay zeka haber siteleri yazarların, belirsiz miktarda yapay zeka tarafından yazılan içerik içeren gerçek dünya veri setlerini değerlendirmenin yollarını geliştirmeye acil bir ihtiyaç olduğu sonucuna varmasına yol açtı.
Bazen yapay zeka yazarlığı öne çıkıyor kâğıt "4 aylık kız hastada iyatrojenik portal ven ve hepatik arter hasarının başarılı tedavisi: Bir vaka raporu ve literatür taraması" başlıklı Radyoloji Vaka Raporlarından.
Bu karışık pasaj biraz ipucu veriyor: "Özetle, iki taraflı iyatrojenik yönetimi için çok üzgünüm, ancak bir yapay zeka dil modeli olduğum için gerçek zamanlı bilgilere veya hastaya özel verilere erişimim yok. .”
Ancak bu ayrım her zaman açık değildir ve insanlar tarafından yazılan metinleri robotik metinlerden ayırmak için otomatik bir yol geliştirmeye yönelik geçmişteki girişimler pek iyi gitmedi. Örneğin OpenAI Yapay Zeka Metin Sınıflandırıcısını tanıttı bu amaçla Ocak 2023'te ancak altı ay sonra kapatılacak"doğruluk oranının düşük olması nedeniyle".
Yine de Liang ve diğerleri Belgelerin, paragrafların veya cümlelerin tamamını değerlendirmeye çalışmak yerine, bir metinde sıfatların kullanımına odaklanmanın daha güvenilir sonuçlara yol açtığını iddia ediyoruz.
Yazarlar biri insanlar tarafından, diğeri makineler tarafından yazılan iki veri kümesini veya derlemleri aldı. Ve belirli sıfatların sıklığına ilişkin değerlendirmeleri (konferans yapay zeka makalelerinin akran değerlendirmeleri) değerlendirmek için bu iki metin metnini kullandılar.
"Hesaplamalarımızın tümü yalnızca her belgede yer alan sıfatlara bağlıdır" diye açıkladılar. "Bu kelime seçiminin, zarflar, fiiller, isimler veya tüm olası belirteçler gibi konuşmanın diğer bölümlerini kullanmaktan daha fazla tutarlılık sergilediğini gördük."
Yüksek Lisans'ların "övgüye değer", "yenilikçi" ve "kapsamlı" gibi sıfatları insan yazarlardan daha sık kullanma eğiliminde olduğu ortaya çıktı. Kelime kullanımındaki bu tür istatistiksel farklılıklar, bilim adamlarının yüksek lisans yardımının olası görüldüğü makalelerin incelemelerini belirlemesine olanak tanıdı.
LLM geri bildirimindeki en iyi 100 sıfattan oluşan kelime bulutu, yazı tipi boyutu sıklığı belirtir (büyütmek için tıklayın)
Yazarlar, "Sonuçlarımız, bu konferanslara akran değerlendirmesi olarak gönderilen metnin yüzde 6.5 ila yüzde 16.9'unun, LLM'ler tarafından, yani yazım denetimi veya küçük yazım güncellemelerinin ötesinde, önemli ölçüde değiştirilmiş olabileceğini gösteriyor" dedi ve çalışma incelemelerinin bu konferansta yapıldığını belirtti. Bilimsel dergi Nature, mekanize yardımın belirtilerini göstermiyor.
Daha fazla Yüksek Lisans kullanımı ile çeşitli faktörlerin ilişkili olduğu görülmektedir. Bunlardan biri, son teslim tarihinin yaklaşması: Yazarlar, son teslim tarihinden üç gün veya daha kısa bir süre önce gönderilen incelemeler için görünen LLM kullanımında küçük ama tutarlı bir artış buldular.
Araştırmacılar, niyetlerinin yapay zeka yazma yardımının kullanımı hakkında hüküm vermek ya da değerlendirdikleri makalelerden herhangi birinin tamamen yapay zeka modeliyle yazıldığını iddia etmek olmadığını vurguladı. Ancak bilim camiasının Yüksek Lisans'ın kullanımı konusunda daha şeffaf olması gerektiğini savundular.
Ve bu tür uygulamaların, çalışmaları incelenen kişileri uzmanlardan gelen çeşitli geri bildirimlerden potansiyel olarak mahrum bıraktığını ileri sürdüler. Dahası, yapay zeka geri bildirimi, yapay zeka modeli önyargılarına doğru yönelen ve anlamlı içgörüden uzaklaşan bir homojenleştirme etkisi riski taşır. ®
- SEO Destekli İçerik ve Halkla İlişkiler Dağıtımı. Bugün Gücünüzü Artırın.
- PlatoData.Network Dikey Üretken Yapay Zeka. Kendine güç ver. Buradan Erişin.
- PlatoAiStream. Web3 Zekası. Bilgi Genişletildi. Buradan Erişin.
- PlatoESG. karbon, temiz teknoloji, Enerji, Çevre, Güneş, Atık Yönetimi. Buradan Erişin.
- PlatoSağlık. Biyoteknoloji ve Klinik Araştırmalar Zekası. Buradan Erişin.
- Kaynak: https://go.theregister.com/feed/www.theregister.com/2024/03/19/ai_researchers_reviewing_peers/
- :dır-dir
- :olumsuzluk
- :Neresi
- 100
- 16
- 2023
- 2024
- 378
- 7
- 9
- a
- Hakkımızda
- erişim
- AI
- Türkiye
- izin
- her zaman
- am
- Amerika
- miktar
- an
- analiz
- ve
- herhangi
- bariz
- görünmek
- yaklaşan
- savundu
- yapay
- yapay zeka
- AS
- belirlemek
- Yardım
- At
- Denemeler
- Yazarlar
- Yazarlık
- Otomatik
- uzakta
- merkezli
- BE
- olmuştur
- önce
- olmak
- arasında
- Ötesinde
- önyargıları
- Bit
- organları
- fakat
- by
- hesaplamalar
- cao
- dava
- örnek olay
- ChatGPT
- chen
- seçim
- iddia
- tıklayın
- bulut
- CO
- övgüye değer
- topluluk
- tamamen
- kapsamlı
- sonucuna
- Konferans
- konferanslar
- tutarlı
- içermek
- içerdiği
- tartışmak
- içerik
- olabilir
- Daniel
- veri
- veri kümeleri
- Günler
- son teslim tarihi
- sayılır
- bağlı
- geliştirmek
- farklılıkları
- Zorluk
- söylev
- tartışma
- ayrım
- çeşitli
- do
- belge
- evraklar
- egemen
- don
- e
- her
- Efekt
- vurguladı
- büyütmek
- Tüm
- adlı
- değerlendirmek
- değerlendirilir
- değerlendirmeler
- örnek
- sergi
- uzmanlara göre
- açıkladı
- faktörler
- geribesleme
- kadın
- bulgular
- odaklanmış
- odaklanma
- İçin
- bulundu
- Sıklık
- sık sık
- itibaren
- üretken
- üretken yapay zeka
- hediye
- gitmiş
- büyük
- grup
- Var
- yardım et
- HTTPS
- huang
- insan
- İnsanlar
- i
- belirlemek
- darbe
- in
- Dahil olmak üzere
- Artırmak
- belirten
- bilgi
- hasar
- yenilikçi
- kavrama
- İstihbarat
- Niyet
- faiz
- degil
- IT
- ONUN
- james
- Ocak
- dergi
- jpg
- Labs
- dil
- büyük
- Soyad
- Geçen yıl
- sonra
- önemli
- İlanlar
- öğrenme
- Led
- az
- sevmek
- Muhtemelen
- Edebiyat
- Yüksek Lisans
- Düşük
- makine
- makine öğrenme
- Makineler
- yönetim
- anlamlı
- küçük
- model
- modelleri
- değiştirilmiş
- izleme
- ay
- Daha
- Tabiat
- gerek
- ihtiyaçlar
- haber
- belirterek
- isimler
- şimdi
- Açık
- of
- on
- ONE
- bir tek
- OpenAI
- or
- Diğer
- bizim
- dışarı
- kâğıtlar
- parçalar
- geçmek
- geçit
- geçmiş
- hasta
- armut
- akranlar
- yüzde
- Platon
- Plato Veri Zekası
- PlatoVeri
- Portal
- mümkün
- potansiyel
- uygulamalar
- halka açık
- amaç
- oran
- daha doğrusu
- Gerçek dünya
- gerçek zaman
- geçenlerde
- güvenilir
- rapor
- Bildirilen
- Raporlar
- Araştırmacılar
- Sonuçlar
- yorum
- Yorumlar
- gözden
- Yorumları
- Yükselmek
- riskler
- s
- Santa
- ölçek
- bilimsel
- Setleri
- İşaretler
- ALTINCI
- Altı ay
- beden
- küçük
- biraz
- özel
- konuşma
- istikrar
- standları
- stanford
- Stanford Üniversitesi
- istatistiksel
- Ders çalışma
- gönderilen
- esasen
- başarılı
- böyle
- önermek
- ÖZET
- alınan
- Teknik
- eğilimindedir
- metin
- göre
- o
- The
- ve bazı Asya
- Onları
- Orada.
- Bunlar
- onlar
- Re-Tweet
- Bu
- üç
- başlıklı
- için
- Jeton
- aldı
- üst
- karşı
- şeffaf
- çalışıyor
- döner
- iki
- üstlendi
- üniversite
- Güncellemeler
- acil
- kullanım
- kullanım
- Kullanılmış
- kullanma
- çok
- oldu
- Yol..
- yolları
- we
- İYİ
- vardı
- Ne
- kimin
- ile
- Word
- İş
- yazı yazıyor
- yazılı
- Ye
- yıl
- zefirnet
- Zhao