Pelayan pracetak akademik arXiv telah melaksanakan perubahan polisi yang signifikan untuk kategori sains komputernya, yang mewajibkan artikel ulasan dan kertas posisi menjalani semakan rakan sebaya yang berjaya di jurnal atau persidangan sebelum penyerahan. Langkah ini, yang diumumkan pada akhir tahun 2024, berlaku apabila platform tersebut berhadapan dengan kemasukan kandungan berkualiti rendah yang tidak terkawal, dipergiatkan oleh model bahasa besar.
Walaupun arXiv menekankan bahawa ini bukanlah perubahan polisi formal tetapi penguatkuasaan garis panduan sedia ada yang lebih ketat, komuniti akademik telah membincangkan dengan hangat tentang implikasi tindakan ini terhadap masa depan komunikasi ilmiah dalam era kandungan terjana AI.
Masalah Teras: Model Bahasa Besar Membanjiri arXiv dengan Kandungan Berkualiti Rendah
Penyederhana sains komputer arXiv mendapati diri mereka dibanjiri ratusan artikel ulasan dan kertas posisi setiap bulan, yang kebanyakannya kelihatan seperti kandungan tidak bermutu yang dijana AI. Kertas-kertas ini biasanya hanya menawarkan bibliografi beranotasi tanpa perbincangan substantif mengenai isu penyelidikan terbuka atau pandangan baharu. Para penyederhana sukarelawan platform, yang sebelum ini menerima artikel ulasan berkualiti tinggi mengikut budi bicara mereka, tidak lagi dapat menguruskan jumlah tersebut sambil mengekalkan misi teras mereka untuk berkongsi kertas penyelidikan yang sah dengan pantas.
Komuniti mengakui ini sebagai tindak balas yang logik terhadap masalah yang semakin membesar. Seperti yang dinyatakan oleh seorang pengulas, model bahasa besar dengan senang hati akan menghasilkan kedua-dua [kertas posisi dan ulasan] ini kerana ia tidak memerlukan sebarang sumbangan teknikal, kod berfungsi, keputusan yang disahkan, dan lain-lain. Ini mewujudkan ribut sempurna di mana menjana kandungan yang kelihatan akademik menjadi remeh, membebankan sistem yang dibina berdasarkan andaian niat baik tentang usaha penulis.
Statistik Penyerahan arXiv (Oktober 2024)
- Jumlah penyerahan: 26,000 kertas kerja
- Kategori Sains Komputer: Jumlah penyerahan tertinggi
- Artikel ulasan/kertas kedudukan: Beratus-ratus diterima setiap bulan
Komuniti Berbelah Bahagi Mengenai Penyelesaian dan Implikasi
Reaksi terhadap pendekatan baharu arXiv mendedahkan perpecahan mendalam dalam komuniti akademik. Ada yang menyokong langkah ini sebagai kawalan kualiti yang perlu, manakala yang lain bimbang tentang kesan tidak diingini terhadap penyelidik yang sah.
Penyokong berhujah ini akan membantu mengekalkan nilai arXiv sebagai sumber. arXiv telah lama menderita akibat kertas promosi diri yang berkualiti rendah dalam bidang Sains Komputer, menurut seorang pengulas, sambil menyatakan masalah itu wujud sebelum model bahasa besar tetapi telah diperhebatkan dengan ketara olehnya. Perubahan ini sepatutnya membantu pembaca mencari kandungan berharga sambil membebaskan penyederhana untuk menumpukan perhatian pada kertas penyelidikan yang memajukan penemuan saintifik.
Walau bagaimanapun, pengkritik membangkitkan kebimbangan tentang memperlahankan penyebaran pantas yang menjadikan pelayan pracetak berharga. Sebahagian daripada kelebihan arXiv ialah anda boleh mendapatkan kertas tersebut serta-merta sebagai pracetak, seorang pengulas menegaskan, sambil menonjolkan bagaimana penerimaan jurnal atau persidangan mandatori memperkenalkan kelewatan yang ketara. Yang lain bimbang ini hanya mengalihkan kesesakan penyerahan kepada persidangan dan jurnal yang sudah terlalu banyak beban.
Penyelesaian Alternatif Dicadangkan oleh Komuniti
Perbincangan ini telah mencetuskan pemikiran kreatif tentang cara menangani masalah asas. Beberapa pengulas mencadangkan sistem reputasi di mana penyelidik boleh menyokong kertas, mewujudkan alternatif 'rangkaian-kepercayaan' kepada semakan rakan sebaya tradisional. Ada yang mencadangkan yuran penyerahan kecil sebagai penghalang spam atau malah hukuman jenayah untuk penerbitan terjana AI yang tidak didedahkan.
Saya agak mengharapkan sistem rangkaian-kepercayaan untuk menggantikan semakan rakan sebaya. Sesiapa sahaja boleh menyokong sebuah artikel. Anda boleh memutuskan penyokong mana yang anda percayai, dan melakukan beberapa pengiraan rangkaian untuk mencari apa yang anda fikirkan patut dibaca.
Cadangan sistem sokongan mencerminkan keinginan yang lebih luas untuk penilaian kualiti terpencar, walaupun pengkritik dengan pantas menyatakan kelemahan terhadap lingkaran sitiran dan rangkaian penyokong palsu. Cabaran asas kekal untuk membezakan antara kepakaran manusia dan kandungan terjana AI yang secara dangkal menyerupai kerja akademik.
Implikasi Lebih Luas untuk Penerbitan Akademik
Perubahan polisi ini menandakan detik penting untuk penerbitan akademik semasa ia menyesuaikan diri dengan teknologi AI. Walaupun buat masa ini terhad kepada kategori Sains Komputer arXiv, pengumuman itu menyatakan kategori lain mungkin mengikutinya jika mereka mengalami banjiran penyerahan didorong model bahasa besar yang serupa. Keadaan ini menekankan bagaimana alat AI memaksa penilaian semula amalan akademik dan mekanisme kawalan kualiti yang telah lama wujud.
Ketegangan teras terletak antara penyebaran terbuka dan jaminan kualiti. arXiv membina reputasinya dengan membolehkan perkongsian penyelidikan yang pantas sebelum semakan rakan sebaya formal, tetapi kini berhadapan dengan realiti bahawa keterbukaan ini boleh dieksploitasi oleh kandungan terjana AI. Seperti yang dinyatakan secara ringkas oleh seorang pengulas, Penghantar spam merosakkan segala-galanya. Ini memberikan penghantar spam pengganda daya.
Komuniti akademik kini berhadapan dengan cabaran untuk membangunkan sistem baharu yang mengekalkan faedah pracetak terbuka sambil melaksanakan perlindungan berkesan terhadap kandungan terjana AI. Sama ada melalui penyelesaian teknologi, perubahan polisi, atau anjakan budaya, perbualan yang dicetuskan oleh keputusan arXiv ini kemungkinan besar akan membentuk landskap penerbitan akademik untuk tahun-tahun akan datang.
Ujian muktamad akan sama ada langkah-langkah ini berjaya menapis kandungan AI berkualiti rendah tanpa menghalang penyelidik yang sah secara tidak wajar, terutamanya mereka yang berada di luar institusi akademik tradisional yang paling mendapat manfaat daripada platform penerbitan terbuka.
Rujukan: Attention Authors: Updated Practice for Review Articles and Position Papers in arXiv CS Category