وقتی درباره کیفیت پرسشنامه حرف می‌زنیم، دو واژه روایی و پایایی بیش از همه تکرار می‌شوند؛ اما این دو مترادف نیستند. پایایی به ثبات و هماهنگی اندازه‌گیری اشاره دارد، در حالی که روایی درباره درستی تفسیر نمره‌هاست. یک ترازو ممکن است هر بار وزن را دو کیلو بیشتر نشان دهد؛ در این حالت اندازه‌گیری ثابت است، اما درست نیست. همین مثال نشان می‌دهد پایایی شرط لازم روایی است، ولی به‌تنهایی کافی نیست.
نکته‌ای که باید جدی بگیرید
همسانی درونی بررسی می‌کند گویه‌هایی که قرار است یک سازه را بسنجند تا چه اندازه با یکدیگر هماهنگ‌اند. آلفای کرونباخ شاخص رایجی است، اما مقدار بسیار بالا همیشه نشانه کیفیت برتر نیست و گاهی از تکراری بودن گویه‌ها خبر می‌دهد. امگای مک‌دونالد در بسیاری از موقعیت‌ها برآورد مناسب‌تری ارائه می‌کند، زیرا فرض‌های محدودکننده کمتری دارد. گزارش حرفه‌ای بهتر است تنها به یک ضریب متکی نباشد.
روش درست اجرا
پایایی بازآزمایی نوع دیگری از ثبات را نشان می‌دهد: آیا افراد در فاصله زمانی معقول نمره‌ای نسبتاً مشابه می‌گیرند؟ این شاخص برای صفات پایدار اهمیت بیشتری دارد، اما برای حالت‌هایی که ذاتاً تغییر می‌کنند باید با احتیاط تفسیر شود. توافق بین ارزیابان نیز زمانی مطرح است که امتیازدهی به قضاوت مشاهده‌گر وابسته باشد.
کنترل کیفیت و خطاهای رایج
روایی محتوایی می‌پرسد آیا مجموعه گویه‌ها قلمرو سازه را به‌خوبی پوشش داده‌اند. روایی سازه معمولاً با تحلیل عاملی و روابط مورد انتظار با متغیرهای دیگر بررسی می‌شود. در روایی همگرا انتظار داریم ابزار با سنجه‌های نزدیک رابطه مناسب داشته باشد و در روایی واگرا نباید با سازه‌های متفاوت بیش از حد همبسته باشد. روایی ملاکی نیز نمره ابزار را با یک معیار بیرونی معتبر مقایسه می‌کند.
گزارش علمی و قابل دفاع
هیچ ضریب واحدی مهر تأیید همیشگی بر یک پرسشنامه نمی‌زند. کیفیت اندازه‌گیری به جامعه، زبان، هدف استفاده و شرایط اجرا وابسته است. بنابراین عبارتی مانند «این پرسشنامه معتبر است» بهتر است با ذکر جامعه، نوع شواهد و منبع پژوهش همراه شود. پژوهشگر باید نشان دهد چرا شواهد موجود برای کاربرد فعلی کفایت دارند.
جمع‌بندی کاربردی
در گزارش پایان‌نامه، نام نسخه ابزار، منبع اصلی و فارسی، تعداد گویه و ابعاد، طیف پاسخ، روش نمره‌گذاری و شواهد روایی و پایایی را منظم بنویسید. اگر در نمونه خودتان پایایی را محاسبه کرده‌اید، آن را جدا از نتایج مطالعات قبلی گزارش کنید. این تفکیک ساده، متن روش‌شناسی را دقیق‌تر و داوری آن را آسان‌تر می‌کند.
