رفتن به محتوای اصلی
Koohestun
پژوهش کوهستاننشر دانشگاهیبررسی شواهد· 5 دقیقه مطالعه· در آموزش

چگونه «گزارش‌های ثبت‌شده» سوگیری ۹۶ درصدی نتایج مثبت در نشر دانشگاهی را معکوس می‌کنند

یک قالب جدید در نشر دانشگاهی با داوری همتایانِ روش‌شناسی پیش از گردآوری داده‌ها، فشار برای تولید نتایج از نظر آماری معنادار را از بین می‌برد.

به قلم رضا حسینی

حامیان علوم باز 35%سردبیران نشریات سنتی 25%پژوهشگران تازه‌کار 20%تحلیلگران فراعلم 20%
حامیان علوم باز
استدلال می‌کنند که قطع ارتباط بین نتایج و انتشار، تنها راه برای رفع بحران تکرارپذیری است.
سردبیران نشریات سنتی
برای دقت قالب جدید ارزش قائل‌اند، اما معتقدند نشر سنتی همچنان برای پژوهش‌های اکتشافی ضروری است.
پژوهشگران تازه‌کار
از انتشار تضمین‌شده نتایج خنثی سود می‌برند، اما با چالش‌های عملی در زمان‌بندی‌های طولانی‌تر مواجه‌اند.
تحلیلگران فراعلم
بر کمّی‌سازی تحریف‌های سیستماتیک در ادبیات دانشگاهی و ارزیابی اصلاحات ساختاری تمرکز دارند.

دیدگاه‌هایی که این گزارش پوشش نداده

  • مدیران نهادهای تأمین مالی
  • کمیته‌های ارتقا و استخدام دانشگاهی

در ۳ ژوئن ۲۰۲۶، نشریه Nature قالب «گزارش‌های ثبت‌شده» (Registered Reports) خود را در تمامی رشته‌ها—از جمله علوم طبیعی، اجتماعی و بالینی، و همچنین مهندسی و بهداشت عمومی—گسترش داد. این گسترش یک کاربرد مستقیم برای پژوهشگران فراهم می‌کند: مسیری تضمین‌شده برای انتشار که از تقاضای سنتی برای نتایج پیشگامانه عبور می‌کند. نشریات مشارکت‌کننده به‌جای بررسی مطالعه پس از گردآوری داده‌ها، ابتدا روش‌شناسی را بررسی می‌کنند. اگر پرسش پژوهش مهم و روش‌شناسی آن اصولی باشد، نشریه «پذیرش اصولی» (in-principle acceptance) صادر می‌کند. سپس تیم پژوهشی مطالعه را انجام می‌دهد و می‌داند که فارغ از مثبت، منفی یا کاملاً خنثی بودن یافته‌ها، مقاله منتشر خواهد شد. این فرآیند دومرحله‌ای عملاً ارتباط بین نتیجه مطالعه و قابلیت انتشار آن را قطع کرده و انگیزه دستکاری داده‌ها برای تضمین چاپ در نشریه را از بین می‌برد.[3][4]

داده‌های مربوط به نشر سنتی، تحریف عظیمی را در سوابق علمی نشان می‌دهد. بر اساس یک بررسی در سال ۲۰۲۱ که توسط پژوهشگران آن شیل (Anne Scheel)، میچل شین (Mitchell Schijen) و دانیل لاکنز (Daniël Lakens) در نشریه Advances in Methods and Practices in Psychological Science منتشر شد، ۹۶ درصد از مقالات سنتیِ دارای داوری همتایان، نتایج مثبت و تاییدکننده فرضیه را گزارش می‌دهند. در یک کاوش علمی واقعی که بسیاری از فرضیه‌ها به‌طور طبیعی شکست می‌خورند، نرخ موفقیت ۹۶ درصدی نشان‌دهنده گزارش‌دهی گزینشیِ شدیدی است. مدل سنتی مدت‌هاست که پژوهشگران را ترغیب می‌کند تا به‌جای داستان‌های دقیق، داستان‌های زیبا تولید کنند. از آنجا که نشریات برتر از نظر تاریخی طرفدار یافته‌های بدیع و از نظر آماری معنادار بوده‌اند، پژوهشگران برای ارائه آن‌ها تحت فشار شدیدی قرار داشتند و اغلب نتایج خنثی را در پدیده‌ای به نام «اثر کشوی فایل» (file drawer effect) پنهان می‌کردند.[1]

وقتی مطالعات پیش از مشخص شدن نتایج ارزیابی می‌شوند، نرخ موفقیت به یک خط پایه واقع‌بینانه کاهش می‌یابد. همان بررسی سال ۲۰۲۱ نشان داد که تنها ۴۴ درصد از گزارش‌های ثبت‌شده به نتایج مثبت می‌رسند. نویسندگان نوشتند: «با تحلیل فرضیه اول هر مقاله، ما ۹۶ درصد نتایج مثبت در گزارش‌های استاندارد اما تنها ۴۴ درصد نتایج مثبت در گزارش‌های ثبت‌شده یافتیم.» این شکاف ۵۲ واحد درصدی، حجم مطالعات دقیق اما منفی را که نشریات سنتی از انتشار آن‌ها خودداری می‌کنند، کمّی‌سازی می‌کند. با تضمین انتشار پیش از گردآوری داده‌ها، قالب جدید این سوگیری را کاملاً از بین می‌برد و اطمینان می‌دهد که ادبیات منتشرشده، بازتاب‌دهنده توزیع واقعی یافته‌های علمی است، نه صرفاً یک گلچین دست‌چین‌شده.[1][5]

نشر سنتی دانشگاهی نرخ نتیجه مثبت ۹۶ درصدی به همراه دارد، در حالی که این رقم در صورت بررسی روش‌شناسی پیش از گردآوری داده‌ها تنها ۴۴ درصد است.

مرکز علوم باز (Center for Open Science) که ابتکار گزارش‌های ثبت‌شده را هماهنگ می‌کند، روند پذیرش این قالب را پیگیری می‌کند. تا سال ۲۰۲۶، بیش از ۳۰۰ نشریه دانشگاهی این فرآیند داوری دومرحله‌ای را ارائه می‌دهند. این مرکز خاطرنشان می‌کند که این قالب، روش‌های پژوهشی شبهه‌ناک مانند «دستکاری مقدار پی» (p-hacking)—اجرای تحلیل‌های آماری متعدد و گزارش‌دهی گزینشیِ تنها مواردی که نتایج معنادار تولید می‌کنند—و HARKing (فرضیه‌سازی پس از مشخص شدن نتایج) را از بین می‌برد. از آنجا که روش‌شناسی پیش از وجود داده‌ها نهایی شده و توسط همتایان داوری می‌شود، پژوهشگران نمی‌توانند پارامترهای خود را برای عبور از آستانه معناداری آماری به‌طور عطف‌به‌ماسبق تنظیم کنند.[4]

مرکز علوم باز (Center for Open Science) که ابتکار گزارش‌های ثبت‌شده را هماهنگ می‌کند، روند پذیرش این قالب را پیگیری می‌کند.

این قالب علاوه بر کاهش سوگیری، علمِ پایه را نیز به‌طور مشهودی بهبود می‌بخشد. یک مطالعه مشاهده‌ای در سال ۲۰۲۱ که در نشریه Nature Human Behaviour منتشر شد، از ۳۵۳ پژوهشگر خواست تا ۲۹ گزارش ثبت‌شده منتشرشده را در کنار ۵۷ مقاله مقایسه‌ای استاندارد داوری کنند. داوران مقالات را بر اساس ۱۹ معیار پیامد مجزا ارزیابی کردند، در حالی که کاملاً از اینکه کدام مقالات از قالب دومرحله‌ای استفاده کرده‌اند بی‌اطلاع بودند. نتایج نشان داد که گزارش‌های ثبت‌شده در تمام زمینه‌ها بهتر از مقالات سنتی عمل کردند. داوران به مقالات دومرحله‌ای در زمینه دقت روش‌شناختی، کیفیت استراتژی تحلیل و کیفیت کلی مقاله امتیاز بسیار بالاتری دادند.[2]

از آنجا که پژوهشگران پیش از گردآوری داده‌ها بازخورد داوری همتایان را دریافت می‌کنند، می‌توانند به‌جای صرفاً اعتراف به نقص‌ها در بخش بحثِ پس از انتشار، واقعاً بهبودهای روش‌شناختی را اعمال کنند. اگر داوری یک متغیر مخدوش‌کننده، نقصی در توان آماری یا ابزاری با کالیبراسیون ضعیف را تشخیص دهد، تیم پژوهشی می‌تواند پیش از صرف ماه‌ها یا سال‌ها زمان برای اجرای آزمایش، پروتکل را اصلاح کند. این تغییر ساختاری، داوری همتایان را از یک تمرین دروازه‌بانیِ تنبیهی به یک فرآیند طراحی مشارکتی تبدیل می‌کند، رابطه بین نویسندگان و داوران را اساساً تغییر می‌دهد و از هدر رفتن بودجه در طراحی‌های آزمایشیِ ناقص جلوگیری می‌کند.[2][5]

فرآیند داوری همتایان دومرحله‌ای، انتشار مقاله را فارغ از نتیجه نهایی مطالعه تضمین می‌کند.

شواهدِ پشتیبانِ این قالب قوی است، اما داده‌ها در مورد کاربردپذیری همگانی آن همچنان اندک است. گزارش‌های ثبت‌شده نیازمند آن هستند که پژوهشگران پیش از شروع گردآوری داده‌ها، منتظر پایان مرحله اول داوری همتایان بمانند. این امر تأخیرهای اداری ایجاد می‌کند که می‌تواند پژوهش‌های حساس به زمان را مختل کرده یا با چرخه‌های سخت‌گیرانه تأمین مالی تداخل داشته باشد. برای دانشگاهیان تازه‌کار که با زمان‌بندی‌های سفت‌وسخت برای ارتقا مواجه‌اند، ماه‌ها انتظار برای دریافت پذیرش اصولی پیش از شروع یک آزمایش، ریسک حرفه‌ای قابل‌توجهی به همراه دارد، حتی اگر انتشار نهایی تضمین شده باشد.[5]

علاوه بر این، این قالب صرفاً برای پژوهش‌های تاییدی و مبتنی بر فرضیه طراحی شده است. این قالب اساساً برای مطالعات اکتشافی که در آن‌ها پژوهشگران به انعطاف‌پذیری برای پیروی از داده‌ها، تنظیم روش‌های خود در میانه راه و بررسی ناهنجاری‌های غیرمنتظره نیاز دارند، نامناسب است. برای علم اکتشافی—که مسئول بسیاری از بزرگ‌ترین کشفیات تصادفی تاریخ است—مدل نشر سنتی همچنان تنها مسیر عملی است. هیئت‌های تحریریه تأکید می‌کنند که این دو قالب به‌جای اینکه مانعةالجمع باشند، مکمل یکدیگرند و مسیرهای متمایزی را برای آزمایش نظریه‌های تثبیت‌شده در برابر تولید نظریه‌های کاملاً جدید فراهم می‌کنند.[3][5]

با وجود این محدودیت‌های عملی، گسترش این قالب توسط ناشران بزرگ نشان‌دهنده یک اصلاح ساختاری در نحوه ارزیابی کار دانشگاهی در بالاترین سطوح است. با تغییر پاداش حرفه‌ای از مقصد به مسیر، جامعه دانشگاهی در حال ایجاد یک ادبیات موازی است که واقعیتِ واقعی و اغلب بی‌نتیجهِ کشف علمی را بازتاب می‌دهد. با پذیرش این استاندارد توسط نشریات برترِ بیشتر، فشار عظیم برای تولید معجزاتِ از نظر آماری معنادار، به‌آرامی جای خود را به تقاضای پایدار برای دقت روش‌شناختی و شفافیت مطلق می‌دهد.[3][5]

نکات کلیدی

  • نشریه Nature در ۳ ژوئن ۲۰۲۶ قالب «گزارش‌های ثبت‌شده» را در تمام رشته‌های خود گسترش داد.
  • این قالب نیازمند داوری همتایانِ روش‌شناسی مطالعه پیش از گردآوری هرگونه داده است و انتشار آن را فارغ از نتیجه نهایی تضمین می‌کند.
  • نشریات سنتیِ دارای داوری همتایان در ۹۶ درصد مواقع نتایج مثبت و تاییدکننده فرضیه را گزارش می‌دهند که نشان‌دهنده سوگیری شدید در انتشار است.
  • گزارش‌های ثبت‌شده تنها در ۴۴ درصد مواقع به نتایج مثبت می‌رسند که بازتاب‌دهنده توزیع دقیق‌تری از یافته‌های علمی است.
  • اکنون بیش از ۳۰۰ نشریه دانشگاهی این فرآیند داوری دومرحله‌ای را برای مبارزه با روش‌های پژوهشی شبهه‌ناک مانند دستکاری مقدار پی ارائه می‌دهند.
  • داده‌های مشاهده‌ای نشان می‌دهد که گزارش‌های ثبت‌شده در دقت روش‌شناختی و کیفیت کلی مقاله امتیاز بسیار بالاتری کسب می‌کنند.

اصطلاحات کلیدی

گزارش ثبت‌شده
قالبی در نشر که در آن روش‌شناسی یک مطالعه پیش از گردآوری هرگونه داده، توسط همتایان داوری و پذیرفته می‌شود.
پذیرش اصولی
تضمینی از سوی یک نشریه برای انتشار یک مطالعه فارغ از نتایج نهایی آن، مشروط بر اینکه پژوهشگران از روش‌شناسی تأییدشده خود پیروی کنند.
سوگیری انتشار
تمایل نشریات دانشگاهی به انتشار مطالعاتی با نتایج مثبت و معنادار، در حالی که مطالعاتی که هیچ اثری پیدا نمی‌کنند را رد می‌کنند.
دستکاری مقدار پی
عمل اجرای تحلیل‌های آماری متعدد روی یک مجموعه داده و گزارش‌دهی تنها مواردی که نتایج معنادار به همراه دارند.
هارکینگ (HARKing)
مخفف فرضیه‌سازی پس از مشخص شدن نتایج، که شامل ارائه یک نظریه پس از وقوع به‌عنوان فرض اولیه مطالعه است.

منابع

پوشش منابع

5 منبع

4 دیدگاه شناسایی‌شده

حامیان علوم باز 35%سردبیران نشریات سنتی 25%پژوهشگران تازه‌کار 20%تحلیلگران فراعلم 20%
  1. [1]Advances in Methods and Practices in Psychological Scienceحامیان علوم باز

    An Excess of Positive Results: Comparing the Standard Psychology Literature With Registered Reports

    مطالعه در Advances in Methods and Practices in Psychological Science
  2. [2]Nature Human Behaviourپژوهشگران تازه‌کار

    Initial evidence of research quality of registered reports compared with the standard publishing model

    مطالعه در Nature Human Behaviour
  3. [3]Natureسردبیران نشریات سنتی

    Nature welcomes Registered Reports

    مطالعه در Nature
  4. [4]Center for Open Scienceحامیان علوم باز

    Registered Reports: Peer review before results are known to align scientific values and practices

    مطالعه در Center for Open Science
  5. [5]تیم سردبیری کوهستانتحلیلگران فراعلم

    تحلیل تیم سردبیری کوهستان

    مطالعه در تیم سردبیری کوهستان

نظرات

همیشه در جریان باشید

هر زاویه. هر روز.

دریافت آموزش اخبار همراه با پوشش کامل منابع و تحلیل دیدگاه‌ها، مستقیم در صندوق ورودی شما.