روایی صوری در تحقیق: اهمیت و نحوه سنجش آن
166 Views
روایی یا اعتبار صوری (ظاهری) یعنی تا چه حد یک سنجش به نظر می‌رسد چیزی را که مد نظر انداره گیری ماست واقعا اندازه‌گیری می‌کند (یعنی تطابق بین هدف ما از ابزار سنجش و عملکرد واقعی آن).
روایی صوری مهم است چون شرکت کنندگان اگر باور نداشته باشند که سنجش های مورد استفاده با اهداف تحقیق مرتبط است ممکن است مطالعه شما را جدی نگیرند. روایی صوری معیار اولیه مناسبی برای اعتبار یا روایی تحقیق است. در بسیاری از موارد، روایی صوری جزو بهترین معیارهاست وقتی که توسط متخصص محتوای ابزار تقیق انجام شود.
به زبان ساده تر روایی صوری چیست؟
مثلا، یک آزمون توانایی ریاضی که برای دانشجویان سال اول طراحی شده، در صورتی معتبر خواهد بود که به طور دقیق و جامع مهارت‌های ریاضی یک فرد را از طریق انجام مسئله های مختلف برگرفته از همه حوزه‌های ریاضی از جبر تا حساب دیفرانسیل و انتگرال ارزیابی کند.
با این حال، آزمونی که فقط مهارت های فرد را در جمع و تفریق ارزیابی می کند، برای سنجش توانایی ریاضی این گروه معتبر تلقی نمی شود. علاوه بر این، آزمونی که شامل موارد غیرمرتبط با ریاضیات باشد (مثلاً مواردی که توانایی کلامی را ارزیابی می کنند) نیز معتبر تلقی نمی شود.
اعتبار صوری، بر خلاف اعتبار محتوا، برای ساپورت مسئله و سنجش، بر نظریه تثبیت شده ای تکیه نمی کند.
چرا اعتبار صوری در تحقیق مهم است؟
اعتبار صوری اولین قدم مهم برای سنجش اعتبار یا روایی کلی یک آزمون است. اگرچه نمی‌تواند تعیین کند که آیا یک آزمون واقعاً کار می‌کند یا خیر، اما می‌تواند به محققان ایده بدهد که آیا محتوا و قالب یک آزمون برای اندازه‌گیری ساختار مورد نظر مناسب است یا خیر.
آزمون هایی که ظاهراً معتبر به نظر می رسند می توانند هم به شرکت کنندگان و هم محققین اطمینان دهند که نتایج ارزیابی منصفانه خواهد بود.
از اعتبار صوری می توان برای حذف سریع تحقیقات کم کیفیت استفاده کرد. برای مثال، محققی که مقاله‌ای را در مورد ارتباط بین واکسیناسیون و اوتیسم در کودکان بررسی می‌کند، ممکن است کاستی‌های متعددی را در طراحی آزمایش نشان دهد که باعث رد اعتبار صوری مقاله می‌شود.
علاوه بر این، اعتبار صوری برای ایجاد انواع دیگر اعتبار مهم است. یعنی اعتبار صوری برای ایجاد اعتبار محتوایی یک آزمون ضروری است که تعریفش عبارتست از: میزانی که یک آزمون تمام جنبه های مهم حوزه مورد سنجش را پوشش می دهد.
نحوه اندازه گیری اعتبار صوری
روش های مختلفی وجود دارد که محققان می توانند اعتبار صوری آزمون خود را اندازه گیری کنند. یکی از راه‌ها این است که از شرکت‌کنندگان بخواهیم رتبه‌بندی کنند که برای اندازه‌گیری ساختار مورد نظر.هر مورد در آزمون چقدر مرتبط و مهم است.
راه دیگر این است که از شرکت کنندگان بپرسید که آیا فکر می کنند آزمون معیار خوبی برای سازه مد نظر است یا خیر
هر دوی این روش ها مزایا و معایب خود را دارند. به عنوان مثال، معیارهای خود گزارشی ممکن است تحت تأثیر سوگیری ها و باورهای خود شرکت کنندگان در مورد سازه مورد سنجش و همچنین سطح آشنایی آنها با آن قرار گیرد.
برای مثال، شرکت‌کنندگانی که اصلاً نمی‌دانند شیمی آلی چیست، ممکن است نتوانند تشخیص دهند که آیا آزمون یک روش معتبر برای ارزیابی دانش استریوشیمی است یا خیر. به این ترتیب، اغلب بهتر است از چندین روش برای ارزیابی اعتبار صوری استفاده شود.
چه کسی باید اعتبار صوری را اندازه گیری کند؟
به طور کلی، اعتبار صوری زمانی که توسط عموم مردم انجام شود معیار ضعیف تری از اعتبار است، اما برای یک متخصص در این زمینه می تواند قوی تر باشد. با این حال، به طور کلی، بهتر است چند نفر اعتبار صوری را اندازه گیری کنند، زیرا افراد مختلف ممکن است دیدگاه های متفاوتی در مورد آنچه برای اندازه گیری یک سازه مهم است داشته باشند.
به عنوان مثال، گروهی از متخصصان شیمی آلی ممکن است نظرات متفاوتی در مورد اینکه چه محتوایی باید در یک آزمون استریوشیمی گنجانده شود، نسبت به گروهی از دانشجویان سال اول دانشگاه که در حال گذراندن یک دوره مقدماتی با این موضوع هستند، داشته باشند.
همچنین توجه به این نکته مهم است که اعتبار صوری ثابت نیست. یعنی آنچه برای اندازه‌گیری یک سازه معتبر است، می‌تواند در طول زمان تغییر کند.
برای مثال، آزمون شخصیتی برای سنجش «مردانگی» و «زنانگی» که در دهه 1950 ایجاد شد، ممکن است امروزه معتبر تلقی نشود، زیرا درک جامعه از جنسیت از آن زمان به‌طور چشمگیری تغییر کرده است. به این ترتیب، بررسی و به روز رسانی معیارهای اعتبار صوری به طور منظم مهم است.
چه زمانی باید روایی صوری را آزمایش کنید؟
اعتبار صوری اغلب در مراحل اولیه توسعه آزمون اندازه‌گیری می‌شود، زیرا می‌تواند به محققان ایده دهد که آیا محتوا و قالب یک آزمون برای اندازه‌گیری ساختار مورد نظر مناسب است یا نه.
با این حال، توجه به این نکته مهم است که اعتبار صوری تنها یک مرحله مقدماتی در ارزیابی اعتبار کلی یک آزمون است. انواع دیگر اعتبار (به عنوان مثال، اعتبار محتوا، اعتبار پیش بینی) نیز باید ارزیابی شوند تا مشخص شود که آیا یک آزمون واقعاً درست کار می کند یا خیر.
سوالات متداول
اعتبار صوری درونی است یا بیرونی؟
اعتبار درونی به طور کلی شامل اعتبار نتایج در یک مطالعه است، در حالی که اعتبار خارجی مربوط به اعتبار به کارگیری نتایج مطالعه در خارج یا خارج از محیط یک مطالعه است. اکثر متخصصان معتقدند که روایی صوری یکی از عوامل روایی داخلی و سازه است.
روایی صوری می‌تواند به ارزیابی روایی معیار کمک کند – میزانی که آیتم‌های یک پرسشنامه واقعاً حالات یا رویدادهایی را که در نظر گرفته شده در دنیای واقعی اندازه‌گیری می‌کنند و مقداری از اعتبار داخلی – و همچنین اعتبار محتوا – میزانی که آیتم‌ها بر روی یک پرسشنامه که به اندازه کافی ساختار مورد مطالعه را پوشش می دهد (مک درموت، 2011).
چگونه می توان اعتبار صوری را بهبود بخشید؟
می توان با انجام چند کار احتمال اینکه یک سنجش اعتبار صوری بالا پیدا کند را افزایش داد.
اولاً، استفاده از زبان واضح و مختصر هنگام ساخت آیتم ها برای اندازه گیری مهم است. اگر موارد گیج کننده یا درک آنها دشوار باشد، شرکت کنندگان احتمالاً علاقه و تعامل خود را با کار از دست می دهند.
دوم، در صورت امکان از محتوا و سناریوهای آشنا استفاده کنید. این کار باعث می‌شود شرکت‌کنندگان راحت‌تر با آیتم‌ها ارتباط برقرار کنند و ببینند چگونه ممکن است به زندگی خودشان مرتبط باشند.
در نهایت و بدیهی‌ترین حالت، مهم است که مطمئن شوید که آیتم‌های موجود در ابزار سنجش در واقع همان چیزی را که ادعا می‌کنند اندازه‌گیری می‌کنند، اندازه‌گیری می‌کنند.
اگر بین اهداف بیان شده اندازه گیری و محتوای واقعی آیتم ها مغایرت وجود داشته باشد، این امر احتمالاً ادراک از اعتبار صوری را کاهش می دهد (فینک، 2010).
چرا اعتبار صوری توسط محققان به عنوان یک مورد ساده در نظر گرفته می شود؟
اعتبار صوری راحت‌تر از سایر انواع اعتبار تلقی می‌شود، زیرا ایجاد آن نسبتاً آسان و سریع است.
تنها چیزی که لازم است این است که یک متخصص در این زمینه محتوای آزمون را بررسی کرده و از مرتبط و جامع بودن آن اطمینان حاصل کند. ثانیا، اعتبار صوری را می توان بدون نیاز به اجرای آزمون برای کسی تعیین کرد.
این برخلاف انواع روایی است که آزمون دهندگان را ملزم به تکمیل ارزیابی واقعی می کند (به عنوان مثال، روایی همگرا، اعتبار متمایز) (فینک، 2010).
آیا اعتبار صوری همان اعتبار محتواست؟
اعتبار صوری با اعتبار محتوا یکسان نیست. در حالی که اعتبار صوری میزانی است که به نظر می رسد ابزار سنجش آن چیزی را که واقعا قرار است اندازه گیری کند، اندازه گیری می کند، اعتبار محتوایی یعنی تا چه حد یک معیار واقعاً ساختاری را که قرار است اندازه گیری کند، پوشش می دهد.
روایی صوری یکی از دو روش برای ارزیابی اعتبار محتوا است.
از بین این معیارها، اعتبار صوری کمترین دقت را دارد، زیرا تنها فرآیندی که درگیر است، بازبینی معیار و تعیین اعتبار محتوا بر اساس «وجهه» معیار – ظاهر آن است (روبیو، 2005).
برای اعتبار صوری به چند کارشناس نیاز است؟
روایی منطقی روش دیگری برای ارزیابی اعتبار محتوایی یک معیار است. این فرآیند مستلزم این است که گروهی از متخصصان موارد مربوط به اندازه گیری را بررسی کنند و تعیین کنند که آیا هر یک از آیتم ها بازنمود مناسبی از مفهوم مورد سنجش است یا خیر (مسیک، 1995). با این حال، برخلاف اعتبار منطقی، اعتبار صوری لزوماً به چندین متخصص برای ارزیابی نیاز ندارد. در واقع، اعتبار صوری را می‌توان با پرسش از گروهی از متخصصان یا پاسخ‌دهندگان غیرمتخصص اندازه‌گیری کرد.
پاسخگوی سوالات و نظرات شما هستیم