Komputasi & AIPracetakAnalisis data3 menit baca

AI TELAH MENGUBAH SEBAGIAN KATA SAINS, BUKAN SAINS ITU SENDIRI — BELUM

Sejak model bahasa besar tersedia untuk publik pada akhir 2022, para peneliti telah memakainya untuk menulis, menyunting, dan menelusuri literatur. Sejumlah studi mengaitkannya dengan keuntungan nyata bagi ilmuwan secara perorangan, dalam produktivitas dan visibilitas. Namun kekhawatiran tumbuh tentang sains secara keseluruhan: sebuah “paradoks AI” (AI paradox), di mana produktivitas dicapai dengan mengorbankan kualitas, banjir “sampah AI” (AI slop), dan monokultur yang merayap, yang akan mempersempit ragam gagasan.

Ron Bekkerman, Nichole Li, Bahareh Kargar dan Mark Somers, di New Jersey Institute of Technology, berupaya mengukur apakah ada yang patah — bukan dibandingkan dengan masa lalu yang diidealkan, melainkan dengan tren yang memang sudah berjalan.

Sepuluh tahun teks lengkap

Korpus mereka memuat sekitar 2,5 juta makalah teks lengkap yang terbit antara 2015 dan 2025, dalam lima disiplin: ilmu komputer, matematika dan fisika (dari arXiv), serta ilmu kesehatan dan ilmu hayati (dari PubMed Central). Alih-alih hanya melihat abstrak, mereka menganalisis makalah secara utuh, mengikuti tangga pertanyaan: kata apa yang dipakai, seberapa kaya dan teknis bahasanya, seberapa beragam topiknya, bagaimana makalah disusun, dan siapa yang menulisnya.

Metodenya sama di sepanjang studi: bandingkan setiap tren sebelum dan sesudah 2022, lalu cari adanya patahan.

Kata-kata yang naik lalu turun

Berangkat dari 20.000 kata bahasa Inggris yang paling umum, yang direduksi menjadi 14.484 bentuk dasar, tim itu menemukan 796 yang melonjak setelah 2022, 199 yang menurun dan 71 yang naik lalu jatuh. Kata-kata yang naik adalah kata analitis yang rapi yang disukai model bahasa, seperti “establish” (menetapkan) dan “underscore” (menggarisbawahi); yang kalah adalah kata-kata sederhana seperti “good” (baik) dan “happen” (terjadi). Kata “delve” (menyelami) yang terkenal menunjukkan pola naik-lalu-jatuh: nyaris tidak ada sebelum 2023, kata itu memuncak pada 2024 dan anjlok tajam pada 2025 — karena model diperbarui dan pembaca makin waspada, menurut dugaan para penulis.

Sinyalnya paling kuat di ilmu komputer dan paling lemah di matematika, yang tulisannya dikendalikan oleh notasi formal. Dan sinyal itu tidak terbatas pada abstrak: kata-kata yang melonjak itu juga muncul di badan makalah.

Bahasa ilmiah tidak menjadi encer

Akan tetapi, kata-kata yang terlibat — sedikit lebih dari seribu — hanyalah setetes dalam kosakata berisi puluhan juta kata yang berbeda. Keragaman leksikal, yang diukur pada jendela geser 50 kata, tidak menunjukkan perubahan kemiringan yang signifikan pada 2022 di disiplin mana pun. Dan kepadatan terminologi ilmiah terus meningkat di kelima bidang. Dalam kata-kata para penulis, “makalah ilmiah tampak makin ilmiah dari waktu ke waktu”.

Topik: dua alarm palsu

Apakah makalah makin sering membicarakan hal yang sama? Di fisika dan matematika, keragaman topik datar. Di ilmu komputer, keragaman itu turun hampir dalam garis lurus — tetapi penurunannya dimulai jauh sebelum 2022, ketika bidang ini memusat pada pembelajaran mendalam dan AI generatif, dan bahkan sedikit melambat sejak 2021.

Ilmu kesehatan dan ilmu hayati memang menunjukkan penurunan yang lebih tajam setelah 2022. Namun sebagian besar kemiripan antarmakalah berasal dari format mereka: blok standar tentang lisensi, pernyataan pengungkapan, dan peran kontributor, seiring literatur biomedis bergerak menuju format yang seragam. Menyaring 105 frasa baku semacam itu menghilangkan sebagian besar penurunan tersebut.

Makalah yang disusun menurut templat

Struktur makalah ilmu komputer, yang dikaji pada hampir 438.000 makalah, telah banyak berubah — tetapi secara bertahap. Makalah yang hanya memiliki satu sampai tiga bagian turun dari 17% menjadi 4%, sementara yang memiliki delapan bagian atau lebih naik dari 5% menjadi 30%. Bagian pendahuluan menyusut dari rata-rata 2.141 menjadi 1.236 kata, sementara daftar pustaka panjangnya hampir dua kali lipat. Tak satu pun dari tren ini patah pada 2022.

Tim lebih besar, makalah lebih banyak — sebagian besar seperti sebelumnya

Tim rekan penulis sudah bertambah besar di setiap disiplin sebelum 2022, dan sekadar terus bertambah. Satu pengecualian menonjol: tim ilmu komputer dari Asia tumbuh lebih cepat setelah 2022. Jumlah makalah juga tumbuh lebih cepat di ilmu komputer dan fisika setelah 2022, yang dikaitkan para penulis dengan model bahasa. Lonjakan produksi biomedis pada 2023 lebih mungkin merupakan pemulihan dari kemerosotan pada 2022 yang disebabkan oleh gangguan era COVID.

Belum

Para penulis hanya menemukan sedikit bukti adanya “paradoks AI” pada skala sains secara keseluruhan. Mereka memperingatkan agar segelintir kata yang sedang tren tidak dibaca sebagai bukti sebuah revolusi, dan berpendapat bahwa kebijakan — tentang pengungkapan, tentang telaah sejawat — adalah alat yang tepat untuk mengelola ketegangan itu. Namun, kepastian yang mereka berikan punya batas waktu. Studi ini hanya mencakup tiga tahun setelah 2022 dan mengukur ciri-ciri tulisan yang dapat diamati, dan para penulis menganggap “kecepatan LLM merasuki proses penelitian” mengkhawatirkan.