چند درصد از مقالات توسط ChatGPT نوشته یا ویرایش می‌شوند؟

بر اساس پژوهشی که فعلا به صورت پیش مقاله در دسترس است، حداقل ۱۰ درصد از خلاصه مقاله‌های #پابمد که در ۲۰۲۴ منتشر شده، به کمک ابزارهای هوش مصنوعی مدل‌های زبانی بزرگ (#Large_Language_Model یا #LLM) مثل #ChatGPT نوشته یا ویرایش شده‌اند.

ظاهرا ChatGPT به استفاده از کلماتی مثل delve، crucial و intricate علاقه دارد! در این‌ پژوهش، ۱۴ میلیون خلاصه مقاله‌ی پابمد از سالهای ۲۰۱۰ تا ۲۰۲۴ با هدف استفاده از کلمات اضافی مورد بررسی قرار گرفته‌ تا افزاش ناگهانی در کلمات جدید مشخص شود.

برای مثال کلمه Delves در ۲۰۲۴، بیست و پنج برابر بیشتر استفاده شده است. همین طور Showcasing و underscores، نه برابر بیشتر استفاده شده‌اند و …

برای مقایسه در سالهای قبل فقط کلمات مرتبط با محتوا مثل ابولا در ۲۰۱۵ و زیکا در ۲۰۱۷ و کلماتی مثل ماسک در ۲۰۲۱، فراونی بیشتری پیدا کرده بوده‌اند. اما در ۲۰۲۴ موارد متفاوت بوده‌اند:

در ۲۰۲۴ این کلمات جدید اضافی تقریبا هیچ یک، مرتبط با محتوا نبوده و برعکس همه مرتبط با استایل بوده‌اند. به این معنی که در مقالات در زمینه‌های مختلف استفاده شده‌اند. همین طور اکثر آنها اسم نبوده بلکه فعل و یا صفت بوده‌اند.

بر اساس بررسی لیستی از این کلمات، مشخص شده است که تعداد خلاصه مقالات پابمد در ۲۰۲۴ که از یکی از این کلمات استفاده کرده‌اند، تقریبا ده درصد بیشتر شده است. یا به عبارت دیگر ده درصد از خلاصه مقالات پامبد به کمک ChatGPT نوشته شده است.


برای این موضوع آنالیزهای زیرگروهی متعددی هم انجام شده است: برای مثال این درصد برای ایران (بین ۱۰ تا ۱۵؟)، برای چین و کره جنوبی بیش از ۱۵ و برای مقالات انتشارات Frontiers و MDPI تقریبا ۱۷ بوده است.


دسترسی به پیش مقاله: لینک

توضیح پروژه در شبکه ایکس: لینک

@Scientometric