❖ انتخاب گزینشی (Cherry-picking)

گاهی وقتها یک نفر برای دفاع از یک ادعا فقط یک یا دو مقاله میفرستد. مقاله را که باز میکنید ظاهرا همه چیز هم درست به نظر میرسد. نتیجه همان است که نقل شده، ژورنال هم معتبر است، نویسندگان هم شناخته‌ شده‌اند. همینجا معمولا بحث تمام میشود. درصورتی که از نگاه پژوهشی، تازه اولین سوال شکل میگیرد.
خود آن مقاله چطور انتخاب شده است؟
اگر به جای آن، پنجاه مقاله‌ی دیگر هم درباره‌ی همان موضوع وجود داشته باشد چه؟ اگر از میان همه‌ی آنها فقط همان مطالعه‌ای انتخاب شده باشد که با ادعای مورد نظر سازگار است دیگر مسئله کیفیت آن مقاله نیست. مسئله نحوه‌ی انتخاب آن است. به همین علت هم اصطلاح Cherry-picking سالهاست وارد ادبیات روش‌شناسی پژوهش شده است. این‌ کار هم ممکن است اغلب ناخودآگاه انجام شود و فرد واقعا فکر میکند بررسی کرده است.

یک مورد دیگر هم این است که خود مقاله هم همیشه یکدست نیست. بخش Results دادهها را نشان میدهد اما Discussion محل تفسیر همان داده‌هاست. این دو همیشه هم‌وزن نیستند. خیلی وقتها داده‌ها محتاط‌اند ولی تفسیر گسترده‌تر نوشته شده است. اگر فقط چند جمله از Discussion جدا شوند ممکن است خواننده تصور کند خود داده‌ها همان نتیجه را تایید کرده‌اند.

موارد دیگر هم وجود دارد. گزارشهای موردی(Case Report) گاهی به عنوان شواهد قطعی مطرح میشوند درحالی که که اساسا برای چنین کاری نوشته نشده‌اند. یا مطالعه‌ای با حجم نمونه‌ی محدود، بدون اشاره به محدودیتهایش نقل میشود. یا هشت مطالعه‌ای که نتیجه‌ی دیگری داشته‌اند کنار گذاشته میشوند و فقط همان مطالعه‌ی نهم دیده میشود. هیچکدام از اینها الزاما به معنای خطای علمی نیستند ولی کنار هم میتوانند تصویری بسازند که با مجموعه‌ی واقعی شواهد فاصله‌ی قابل توجهی دارد.

به همین علت در پژوهش معمولا سوال اصلی این نیست که آیا برای این ادعا مقاله‌ای وجود دارد؟ چون تقریبا برای هر ادعایی میشود مقاله‌ای پیدا کرد. سوال اصلی این است که مجموعه‌ی شواهد چه میگوید؟ به همین دلیل هم مرورهای نظام‌مند (Systematic Review) و متاآنالیزها معمولا ارزش استنادی بیشتری از یک مطالعه‌ی منفرد دارند. آنها قرار نیست یک مقاله را انتخاب کنند؛ قرار است تقریبا همه‌ی مقاله‌های مرتبط را کنار هم ببینند. هرچند همینها هم مصون از خطا نیستند.

احتمالا مهمترین تفاوت میان خواندن یک مقاله و خواندن ادبیات یک موضوع همین باشد. مقاله، واحد تولید دانش است. و قضاوت علمی معمولا بر اساس یکی از آنها شکل نمیگیرد، بر پایه‌ی کنار هم قرار گرفتن تعداد زیادی از همین واحدها شکل میگیرد.

-A.RANJBAR