چرا کاهش نرخ مشارکت، اعتبار نظرسنجی‌های افکار عمومی را باطل نمی‌کند؟

در کارآزمایی بالینی یک دارو، انصراف ۹۰ درصدی داوطلبان فوراً مطالعه را باطل می‌کند. پژوهشگران ناچارند فرض کنند بیماران غایب با عوارض جانبی شدیدی روبه‌رو شده‌اند؛ یعنی داده‌های ازدست‌رفته مستقیماً با همان متغیری گره خورده که تحت آزمایش است.[1]

نظرسنجی افکار عمومی با منطق آماری کاملاً متفاوتی کار می‌کند. وقتی یک نظرسنجی تلفنی استاندارد تنها به نرخ پاسخ ۹ درصدی می‌رسد، نتایجش از نظر ریاضی همچنان معتبر است؛ زیرا دلایل پاسخ ندادن—مانند ندیدن تماس‌های ناشناس یا شلوغی سر—به‌ندرت با دیدگاه سیاسی یا اجتماعی مخاطب همبستگی دارد.[2]

این تصور که مشارکت پایین مساوی با داده‌های بی‌ارزش است، شهودی به‌نظر می‌رسد اما از دیدگاه ریاضی نادرست است. خطای ناشی از عدم پاسخ تنها زمانی پدید می‌آید که تمایل فرد به مشارکت، مستقیماً ناشی از همان موضوعی باشد که نظرسنجی قصد اندازه‌گیری‌اش را دارد.[3]

تفکیک نرخ پاسخ از خطای سوگیری

صنعت نظرسنجی دهه‌ها نرخ پاسخ‌دهی را معیار اصلی کیفیت داده‌ها می‌دانست. انجمن پژوهش‌های افکار عمومی آمریکا استانداردهای سرسختی برای محاسبه این نرخ‌ها تدوین کرد، بر این فرض منطقی که پاسخ‌دهندگان کمتر یعنی نمونه‌ای با نمایندگی ضعیف‌تر.[4]

این فرضیه در آزمون‌های تجربی فرو ریخت. یک فراپژوهش جامع در نشریه «پابلیک آپینیون کوارترلی» با بررسی داده‌های چند دهه نظرسنجی نشان داد تقریباً هیچ ارتباطی میان تعداد پاسخ‌دهندگان و دقت یافته‌های نهایی وجود ندارد.[8]

مرکز تحقیقات پیو این فاصله را طی یک بازه ۲۰ ساله پیگیری کرد. بین سال‌های ۱۹۹۷ تا ۲۰۱۶، نرخ پاسخ به نظرسنجی‌های تلفنی استاندارد این مرکز، به‌دلیل فراگیر شدن شماره‌اندازها و تلفن همراه، از ۳۶ درصد به تنها ۹ درصد سقوط کرد.[2]

با وجود این سقوط ساختاری در مشارکت، خطای مطلق ناشی از عدم پاسخ در ۸۴ شاخص استاندارد جمعیت‌شناختی و سیاسی تقریباً دست‌نخورده باقی ماند. جامعه افرادی که با نرخ پاسخ ۹ درصد به تلفن جواب دادند، از نظر آماری هم‌ارز با کسانی بودند که در نرخ ۳۶ درصد پاسخگو بودند.[9]

پژوهشگران مرکز پیو اشاره کردند: «افت شدید نرخ پاسخ‌ها به افزایش متناظر در خطای عدم پاسخ منجر نشده است.» داده‌ها ثابت کرد گروه کوچک‌تری از افراد مایل به مشارکت هنوز می‌توانند به‌خوبی آینه تمام‌نمای جامعه بزرگ‌تر باشند.[2]

داده‌های مفقود چه زمانی خطرناک می‌شوند؟

برای درک چرایی بقای نظرسنجی‌ها در مشارکت پایین، آماردانان تفاوت میان «غیبت کاملاً تصادفی» و «غیبت غیرتصادفی» داده‌ها را مد نظر قرار می‌دهند. اگر افراد صرفاً به‌خاطر بی‌علاقگی به پاسخگویی به شماره‌های ناشناس تماس را رد کنند، داده‌های مفقود تصادفی است و نمونه باقی‌مانده متعادل می‌ماند.[6]

سوگیری آماری تنها زمانی وارد داده‌ها می‌شود که خود موضوع مورد پرسش دلیل امتناع باشد. اگر شهرداری درباره توسعه خطوط دوچرخه‌سواری نظرسنجی کند و فقط دوچرخه‌سواران پرشور به پرسش‌ها پاسخ دهند، تمایل به پاسخ کاملاً با متغیر تحت سنجش همبسته است.[3]

کمیته فدرال روش‌شناسی آمار هشدار می‌دهد که این همبستگی موضوعی، تهدید واقعی برای درستی نظرسنجی‌هاست. نظرسنجی‌ای با نرخ پاسخ ۶۰ درصد اگر ۴۰ درصد ممتنع آن به‌دلیل بیگانگی با موضوع همکاری نکرده باشند، می‌تواند شدیداً گمراه‌کننده باشد.[7]

در مقابل، یک نظرسنجی عمومی سیاسی با نرخ پاسخ ۵ درصدی همچنان دقیق باقی می‌ماند؛ زیرا دیدگاه افراد درباره مالیات یا خدمات درمانی تعیین‌کننده تمایل آن‌ها به رد کردن شماره‌های ناشناس نیست. سازوکار پاسخ ندادن در اینجا به‌کلی از پرسش‌های پرسشگر مستقل است.[5]

این استقلال موضوعی توضیح می‌دهد چرا نظرسنجی‌های انتخاباتی با وجود نرخ پاسخ‌های تک‌رقمی همچنان دقت کلی خود را حفظ می‌کنند. وزن‌دهی جمعیت‌شناختی که آماردانان اعمال می‌کنند، به‌راحتی این عدم تعادل‌ها را رفع می‌کند، مشروط بر آنکه تمایل به پاسخگویی به نامزدی خاص گره نخورده باشد.[9]

محدودیت‌های وزن‌دهی جمعیت‌شناختی

وزن‌دهی فرایندی ریاضی برای تطبیق نمونه با معیارهای سرشماری کل جامعه است. اگر نظرسنجی به جوانان کمی دسترسی پیدا کند، آماردانان ضریب اثر داده‌های جوانان پاسخ‌دهنده را بالاتر می‌برند تا ارقام نهایی بازتاب‌دهنده واقعیت جمعیتی باشد.[4]

این تکنیک زمانی عملکرد بی‌نقصی دارد که جوانان پاسخ‌دهنده دیدگاه‌هایی همسو با جوانان پاسخ‌نداده داشته باشند. اما اگر گروه پاسخگو ویژگی منحصربه‌فردی داشته باشد که گروه غایب فاقد آن است، این شیوه با شکست فاحش روبه‌رو می‌شود.[6]

نمونه بارز چنین شکستی زمانی رخ داد که پژوهشگران درصدد سنجش مشارکت مدنی برآمدند. افرادی که فعالیت مدنی پررنگی در محله‌هایشان دارند، به‌طور طبیعی تمایل بسیار بیشتری دارند تا یک گفت‌وگوی تلفنی ۲۰ دقیقه‌ای درباره فعالیت‌های اجتماعی‌شان را بپذیرند.[2]

در این وضعیت خاص، مرکز تحقیقات پیو به سوگیری چشمگیری ناشی از عدم پاسخ برخورد. نظرسنجی مشارکت مدنی جامعه را بسیار بالاتر از واقعیت برآورد کرد، زیرا افرادی که حاضر به پاسخگویی به نظرسنجی شدند اساساً همان کسانی بودند که در نهادهای مدنی داوطلب می‌شدند.[9]

پژوهشگران در نشریه «پابلیک آپینیون کوارترلی» تاکید کردند: «وقتی موضوع نظرسنجی برای زیرگروهی خاص اهمیت محوری دارد، خطر سوگیری ناشی از عدم پاسخ به‌شدت جهش می‌کند.» بنابراین سوگیری از موضوع برمی‌خیزد، نه از نرخ کلی مشارکت.[1]

بازتعریف معیارهای سنجش کیفیت نظرسنجی

صنعت نظرسنجی اکنون در حال کنار گذاشتن «نرخ پاسخ» به‌عنوان معیاری مستقل برای کیفیت داده است. مؤسسه لایب‌نیتس برای علوم اجتماعی تأکید دارد که پژوهشگران باید سازوکارهای دقیق عدم پاسخ را در هر مطالعه به‌طور جداگانه ارزیابی کنند.[6]

این رویکرد مستلزم طراحی حرفه‌ای‌تر نظرسنجی‌هاست. متدولوژیست‌ها به‌جای تلاش صرف برای افزایش کمّی پاسخ‌دهندگان، روی این نکته تمرکز می‌کنند که دلایل امتناع از پاسخ به‌طور یکنواخت در میان همه گروه‌های جمعیتی و فکری توزیع شده باشد.[3]

اگر یک نظرسنج بتواند اثبات کند که نرخ پاسخ ۵ درصدی بدون حذف سیستماتیک یک دیدگاه خاص به‌دست آمده، داده‌های نهایی به‌اندازه نظرسنجی‌ای که نیمی از جامعه را در بر گرفته معتبر خواهد بود. تمرکز از حجم انبوه به بی‌طرفی ساختاری تغییر یافته است.[5]

واقعیت ریاضی این است که اکثر مردم به‌خاطر دلایل روزمره و عادی به نظرسنجی‌ها پاسخ نمی‌دهند: مشغول پخت‌وپزند، رانندگی می‌کنند یا خسته‌اند. چون این دلایل عادی به یک اندازه میان رأی‌دهندگان با هر گرایشی رخ می‌دهد، نمونه به‌دست‌آمده بازتابی تمیز و دست‌نخورده از کل جامعه باقی می‌ماند.[8]

اعتبار یک نظرسنجی با بی‌طرفی آن سنجیده می‌شود نه با حجم نمونه. تا زمانی که پاسخ دادن به زنگ تلفن تصمیمی بدون بار ایدئولوژیک باشد، نظرسنجی‌های افکار عمومی صرف‌نظر از شمار کسانی که تماس را قطع می‌کنند، بازتاب دقیقی از آرای عمومی ارائه خواهند داد.[7]

این نگرش شیوه خوانش مخاطب از داده‌های نظرسنجی را متحول می‌کند. نرخ پاسخ پایین نقصی مرگبار برای باطل کردن نتایج نیست؛ بلکه صرفاً یکی از ویژگی‌های ارتباطات مدرن است که آماردانان نحوه مهار و خنثی‌سازی آن را فرا گرفته‌اند.[10]