رفتن به محتوای اصلی
کوهستان
توضیح کوهستانمعیارهای پژوهشی· 5 دقیقه مطالعه· در آموزش

نحوه سنجش تأثیرگذاری آکادمیک: مقایسه شاخص اچ، ضریب تأثیر مجله و آلت‌متریکس

برای دهه‌ها، مسیر شغلی یک پژوهشگر به این بستگی داشت که کار او چند بار در مقالات دیگر مورد استناد قرار گرفته است. امروزه، موج جدیدی از معیارهای جایگزین، تعامل عمومی را به صورت لحظه‌ای ردیابی می‌کنند و اساساً نحوه تعریف موفقیت علمی توسط دانشگاه‌ها و نهادهای تأمین مالی را تغییر داده‌اند.

به قلم ویدا کاظمی

به‌طور خلاصه

  • ضریب تأثیر مجله، اعتبار محل انتشار را می‌سنجد، نه مقاله فردی را.
  • شاخص اچ ثبات فردی را می‌سنجد اما از نظر ریاضی محققان در ابتدای مسیر شغلی را در موقعیت نامناسب قرار می‌دهد.
  • آلت‌متریکس تأثیر اجتماعی و سیاست‌گذاری لحظه‌ای را ثبت می‌کند اما می‌تواند شهرت را با کیفیت علمی در هم آمیزد.

یک فیزیکدان که ۲۰ مقاله منتشر کرده و هر کدام ۲۰ بار مورد استناد قرار گرفته‌اند، دارای شاخص اچ ۲۰ است. این عدد واحد، استخدام، تثبیت موقعیت شغلی (تِنور) و تأمین مالی پروژه‌های تحقیقاتی را در سراسر آموزش عالی جهانی تعیین می‌کند. تأثیرگذاری آکادمیک دیگر صرفاً یک پرسش فلسفی نیست؛ بلکه یک ارز رایج و سخت است. برای دهه‌ها، ستون‌های سنتی این ارز—ضریب تأثیر مجله (JIF) و شاخص اچ—با اندازه‌گیری استنادات رسمی، تعیین می‌کردند که چه کسی بودجه بگیرد و چه چیزی منتشر شود.[2][5]

ضریب تأثیر مجله (JIF) اعتبار محل انتشار را می‌سنجد، نه خود مقاله را. این ضریب، میانگین تعداد استنادهایی را محاسبه می‌کند که مقالات منتشر شده در یک مجله طی دو سال قبل، در یک سال معین دریافت کرده‌اند. JIF بالا نشان‌دهنده اعتبار است و محققان را وادار می‌کند تا برای قرار گرفتن در مجلات سطح بالا رقابت شدیدی داشته باشند.[1]

با این حال، شواهد کمی وجود دارد که JIF را به عنوان معیاری برای کیفیت مقاله فردی تأیید کند. از آنجایی که این ضریب میانگین استنادات را محاسبه می‌کند، ممکن است تعداد کمی از مقالات با استناد بالا، JIF کل مجله را به طور مصنوعی افزایش دهند. این ایراد ریاضی واقعیت را پنهن می‌کند که درصد قابل توجهی از مقالات در مجلات با JIF بالا، هیچ استنادی دریافت نمی‌کنند، با این حال نویسندگان آن‌ها همچنان از اعتبار کلی مجله بهره‌مند می‌شوند.[1]

برای ارزیابی محققان فردی به جای مجلات، مؤسسات به شدت به شاخص اچ (h-index) متکی هستند. این شاخص که در سال ۲۰۰۵ پیشنهاد شد، بهره‌وری (تعداد مقالات) را با تأثیرگذاری (تعداد استنادات) متعادل می‌کند. شاخص اچ ۴۰ به این معنی است که یک محقق ۴۰ مقاله منتشر کرده که هر کدام حداقل ۴۰ بار مورد استناد قرار گرفته‌اند. هدف آن پاداش دادن به خروجی ثابت و با کیفیت بالا است، نه صرفاً یک مقاله بسیار پربازدید.[2]

نحوه محاسبه دو ستون سنتی سنجش آکادمیک.

محدودیت شاخص اچ در سوگیری ذاتی آن به نفع محققان با سابقه طولانی و رشته‌های خاص است. این شاخص به طور مطلق در طول زمان انباشته می‌شود، به این معنی که یک دانشمند جوان و باهوش از نظر ریاضی همیشه از یک استاد بازنشسته عقب خواهد بود. علاوه بر این، نرخ انتشار در رشته‌های مختلف بسیار متفاوت است؛ یک شاخص اچ قوی در پزشکی ممکن است ۵۰ باشد، در حالی که سطح معادل تعالی در ریاضیات ممکن است شاخص اچ ۱۵ را به همراه داشته باشد.[1][5]

مهم‌ترین تغییر در سنجش تأثیرگذاری، ظهور آلت‌متریکس (Altmetrics) است. استنادات سنتی ۲ تا ۵ سال طول می‌کشد تا انباشته شوند و این یک تأخیر بزرگ بین انتشار و تأثیرگذاری شناخته‌شده ایجاد می‌کند. آلت‌متریکس (معیارهای جایگزین) توجه لحظه‌ای را در رسانه‌های خبری، اسناد سیاست‌گذاری، ویکی‌پدیا، پتنت‌ها و پلتفرم‌های اجتماعی ثبت می‌کنند.[3][4]

آلت‌متریکس بُرد اجتماعی را می‌سنجد و از محفظه پژواک آکادمیک فراتر می‌رود. ممکن است یک مقاله در سال اول انتشار خود هیچ استناد رسمی نداشته باشد، اما تأثیر زیادی بر یک سیاست جدید بهداشت عمومی یا مقررات آب و هوایی بگذارد. با ردیابی این ردپاهای دیجیتال، آلت‌متریکس یک داشبورد لحظه‌ای از نحوه استفاده واقعی از تحقیقات در دنیای واقعی ارائه می‌دهد.[4]

آلت‌متریکس تعامل عمومی را سال‌ها قبل از انباشته شدن استنادات رسمی ثبت می‌کند.

هشدار اصلی در مورد آلت‌متریکس این است که توجه لزوماً به معنای کیفیت نیست. مقاله‌ای که به دلیل نقص‌های روش‌شناختی در شبکه‌های اجتماعی مورد تمسخر قرار می‌گیرد، امتیاز آلت‌متریک بالایی کسب می‌کند و شهرت را با شایستگی علمی در هم می‌آمیزد. ارائه‌دهندگان آلت‌متریک سعی می‌کنند به این امتیازها وزن دهند—مثلاً اشاره در یک سند سیاست‌گذاری بسیار مهم‌تر از یک پست در شبکه‌های اجتماعی است—اما این معیار همچنان در برابر دستکاری آنلاین آسیب‌پذیر است.[3][4]

با وجود این محدودیت‌ها، پذیرش سازمانی در حال شتاب گرفتن است. دانشگاه‌ها به طور فزاینده‌ای آلت‌متریکس را در پرونده‌های تثبیت موقعیت شغلی (تنور) ادغام می‌کنند تا «تأثیرات گسترده‌تر» مورد نیاز آژانس‌های کمک مالی فدرال را نشان دهند. اکنون محققان فعالانه تشویق می‌شوند که کار خود را به صورت آنلاین تبلیغ کنند، که این امر اساساً جریان کاری روزانه دانشمندان مدرن را تغییر داده است.[5]

هیچ معیار واحدی تصویر کاملی از ارزش آکادمیک ارائه نمی‌دهد. JIF ظرف (مجله)، شاخص اچ سابقه محقق، و آلت‌متریکس ردپای فوری اجتماعی را ارزیابی می‌کند. تکیه بر تنها یک معیار، انگیزه‌های انحرافی ایجاد می‌کند، مانند محققانی که داده‌ها را به چندین مقاله کوچک تقسیم می‌کنند تا شاخص اچ خود را افزایش دهند.[2][6]

دایره آلت‌متریک انواع مختلف توجه آنلاین را وزن‌دهی می‌کند تا یک امتیاز واحد تولید شود.

آینده ارزیابی آکادمیک در پروفایل‌های تأثیرگذاری چندبعدی نهفته است. با گسترش انتشار دسترسی آزاد (Open Access) و تضعیف انحصار پایگاه‌های داده استنادی اختصاصی، مؤسسات در حال ساخت داشبوردهای جامع هستند. این ابزارها روایتی از تأثیرگذاری را ارائه می‌دهند که استنادات داوری‌شده را با داده‌هایی در مورد اینکه چگونه تحقیق، دستورالعمل‌های بالینی را تغییر داده یا بر قانون‌گذاری تأثیر گذاشته است، ترکیب می‌کند.[4][6]

برای عموم مردم، این تغییر به معنای شفاف‌تر شدن اعتبار علمی است. همانطور که معیارها تکامل می‌یابند تا سودمندی در دنیای واقعی را در کنار دقت آکادمیک ثبت کنند، تحقیقاتی که بودجه می‌گیرند و ترویج می‌شوند، به طور فزاینده‌ای تحقیقاتی خواهند بود که فعالانه با مشکلات اجتماعی درگیر شده و آن‌ها را حل می‌کنند.[5][6]

اصطلاحات کلیدی

ضریب تأثیر مجله (JIF)
معیاری برای سنجش فراوانی استناد به میانگین مقاله در یک مجله در یک سال خاص.
شاخص اچ (h-index)
معیاری که نشان می‌دهد یک محقق h مقاله منتشر کرده که هر کدام حداقل h بار مورد استناد قرار گرفته‌اند.
آلت‌متریکس (Altmetrics)
معیارهای جایگزینی که توجه آنلاین، اشاره‌های خبری و استنادات سیاست‌گذاری را برای سنجش تأثیر فوری اجتماعی ردیابی می‌کنند.
کتاب‌سنجی (Bibliometrics)
تحلیل آماری انتشارات مکتوب، که معمولاً برای ردیابی تأثیر آکادمیک از طریق استنادات رسمی استفاده می‌شود.

بررسی عمیق دیدگاه‌ها

کتاب‌سنجی‌دانان سنتی

استدلال می‌کنند که استنادات رسمی داوری‌شده تنها معیار تأیید شده برای دقت علمی باقی می‌مانند.

این گروه معتقدند که اگرچه معیارهای سنتی کُند هستند، اما تنها فیلتر قابل اعتماد برای حقیقت علمی هستند. آن‌ها اشاره می‌کنند که استنادات داوری‌شده نشان‌دهنده استفاده واقعی از تحقیق توسط سایر کارشناسان واجد شرایط است، در حالی که آلت‌متریکس صرفاً نویز عمومی را می‌سنجد. برای این تحلیلگران، تأخیر چند ساله JIF و شاخص اچ یک ویژگی است، نه یک نقص، زیرا زمان کافی برای افشای تحقیقات معیوب قبل از پاداش گرفتن فراهم می‌کند.

حامیان علم باز

استدلال می‌کنند که معیارهای استنادی پولی، تعامل عمومی را حذف می‌کنند و آلت‌متریکس سنجش تأثیرگذاری را دموکراتیک می‌کند.

حامیان علم باز استدلال می‌کنند که تحقیقات با بودجه عمومی باید بر اساس سودمندی عمومی آن‌ها سنجیده شود. آن‌ها از معیارهای سنتی به دلیل ایجاد یک حلقه بسته که در آن دانشگاهیان فقط برای افزایش شاخص اچ خود برای سایر دانشگاهیان می‌نویسند، انتقاد می‌کنند. با ارزش‌گذاری اشاره‌ها در اسناد سیاست‌گذاری، دستورالعمل‌های بالینی و رسانه‌های جریان اصلی، این گروه معتقد است که آلت‌متریکس محققان را مجبور می‌کند یافته‌های خود را به مالیات‌دهندگانی که بودجه آن‌ها را تأمین کرده‌اند، منتقل کنند.

محققان در ابتدای مسیر شغلی

تأکید می‌کنند که معیارهای سنتی از نظر ریاضی محققان جدید را در موقعیت نامناسب قرار می‌دهند.

برای محققانی که امروز وارد این حوزه می‌شوند، شاخص اچ یک دیوار ریاضی غیرقابل عبور است. از آنجایی که این معیار به طور مطلق در طول عمر انباشته می‌شود، یک دانشمند باهوش ۳۰ ساله همیشه در ظاهر کمتر از یک استاد ۶۵ ساله متوسط تأثیرگذار به نظر خواهد رسید. این گروه از معیارهای سطح مقاله و آلت‌متریکس حمایت می‌کنند، که تأثیر فوری یک کار واحد را ارزیابی می‌کنند نه انباشت تاریخی یک شغل چند دهه‌ای.

کتاب‌سنجی‌دانان سنتی 35%حامیان علم باز 35%محققان در ابتدای مسیر شغلی 30%
کتاب‌سنجی‌دانان سنتی
استدلال می‌کنند که استنادات رسمی داوری‌شده تنها معیار تأیید شده برای دقت علمی و ارزش بلندمدت باقی می‌مانند.
حامیان علم باز
استدلال می‌کنند که معیارهای استنادی پولی، تعامل عمومی را حذف می‌کنند و آلت‌متریکس سنجش تأثیرگذاری را دموکراتیک می‌کند.
محققان در ابتدای مسیر شغلی
تأکید می‌کنند که معیارهای سنتی مانند شاخص اچ از نظر ریاضی محققان جدید را در موقعیت نامناسب قرار می‌دهند و طرفدار تغییر به سمت معیارهای سطح مقاله هستند.

دیدگاه‌هایی که این گزارش پوشش نداده

  • آژانس‌های کمک مالی فدرال
  • ناشران آکادمیک تجاری

منابع

پوشش منابع

6 منبع

3 دیدگاه شناسایی‌شده

کتاب‌سنجی‌دانان سنتی 35%حامیان علم باز 35%محققان در ابتدای مسیر شغلی 30%
  1. [1]College & Research Librariesکتاب‌سنجی‌دانان سنتی

    Judging Journals: How Impact Factor and Other Metrics Differ across Disciplines

    مطالعه در College & Research Libraries →
  2. [2]eCorrectorمحققان در ابتدای مسیر شغلی

    Research Impact Metrics and Altmetrics: New Tools for Measuring Scientific Impact

    مطالعه در eCorrector →
  3. [3]Preprints.orgحامیان علم باز

    What are Altmetrics and How You Should Use Them

    مطالعه در Preprints.org →
  4. [4]MDPI Blogحامیان علم باز

    How to Use Altmetrics: Impact Empowered by Openness

    مطالعه در MDPI Blog →
  5. [5]IUPUIمحققان در ابتدای مسیر شغلی

    Better metrics for high-impact research

    مطالعه در IUPUI →
  6. [6]تیم سردبیری کوهستان

    تحلیل تیم سردبیری کوهستان

    مطالعه در تیم سردبیری کوهستان →

نظرات

همیشه در جریان باشید

هر زاویه. هر روز.

اخبار آموزش با پوشش کامل منابع و تحلیل دیدگاه‌ها، هر روز و رایگان.