Осигуряването на валидност на съдържанието далеч не е въпрос на догадки или субективност, а по-скоро е систематичен и методичен процес. Този процес включва поредица от щателно разработени стъпки, насочени към стриктна оценка на това дали елементите на скалата действително и цялостно представят целевия конструкт. Двата основни компонента в рамките на оценката на валидността на съдържанието са експертната оценка и коефициентът на валидност на съдържанието (CVR). И двата елемента работят съвместно за усъвършенстване на скалата и премахване на елементите, които не отразяват ефективно същността на конструкта (Lawshe, 1975).
Процесът на оценка на валидността на съдържанието е многостранен и включва няколко важни стъпки, които са от съществено значение за създаването на надежден и валиден инструмент за измерване. Тези стъпки включват генериране на елементи, експертни оценки и изчисления на коефициента на валидност на съдържанието. Нека да навлезем по-дълбоко във всяка от тези стъпки, като подчертаем използването на експертната оценка и съотношението на валидност на съдържанието (CVR) като ключови инструменти в този процес.
Първоначалната стъпка в оценката на валидността на съдържанието е генерирането на потенциални елементи на скалата. Този етап включва съставянето на поредица от твърдения или въпроси, които са концептуално свързани с изследвания конструкт. Елементите трябва да бъдат формулирани по начин, който е ясен, конкретен и недвусмислен, за да се гарантира, че те точно отразяват същността на конструкта. Този творчески процес изисква задълбочено разбиране на конструкта и внимателен подбор на формулировките, за да се предотврати двусмислието или объркването. Създаването на елементи, които ефективно измерват предвидената психологическа характеристика, е от основно значение за установяване на валидността на съдържанието.
След като бъдат генерирани потенциалните елементи на скалата, следващият етап включва експертни оценки. Експертните прегледи са съществен компонент при усъвършенстването на елементите на скалата. Изследователите привличат експертизата на лица, които притежават познания по темата, свързани с измервания конструкт. Тези експерти щателно оценяват всеки елемент, за да определят дали той точно представя конструкта, дали е ясен и подходящ и дали е формулиран кратко. Тази експертна преценка дава ценна информация за пригодността на елементите за включване в окончателната скала. Обратната връзка от експертите често води до преразглеждане на формулировката на елементите, до изясняване на двусмислени твърдения или до премахване на елементи, които се считат за неуместни или излишни. Това е повтарящ се процес, насочен към повишаване на валидността на съдържанието на скалата.
Освен това, когато експертната преценка се прилага при оценката на валидността на съдържанието, тя повишава цялостното качество и ефективност на скалата. Експертните рецензенти оценяват елементите с проницателно око, като се уверяват, че всеки елемент съответства на дефиницията на конструкта и е от значение за изследването. Те разглеждат яснотата на елементите, тяхната краткост и степента, до която те точно отразяват предвидената психологическа характеристика. Тази всеобхватна оценка от страна на експертите помага да се идентифицират и елиминират елементите, които не отговарят на строгите критерии за валидност на съдържанието, като по този начин се повишава надеждността на скалата.
Успоредно с експертните прегледи, коефициентът на валидност на съдържанието (CVR) играе важна роля при оценката на валидността на съдържанието. Коефициентът на валидност на съдържанието (Content Validity Ratio - CVR) е статистически показател, който определя количествено степента на съгласие между експертите по отношение на значимостта на всеки елемент в скалата (Lawshe, 1975). Той помага обективно да се идентифицират елементите, които имат ниско ниво на валидност на съдържанието, както е определено от експертната група. Процесът на CVR включва експерти, които оценяват всеки елемент като "съществен", "полезен, но не съществен" или "не е необходим" за измерване на конструкта. След това оценките се изчисляват, за да се получи стойност на CVR за всеки елемент. Елементите, които получават ниска оценка CVR, обикновено се разглеждат за отстраняване от скалата, тъй като не постигат необходимото ниво на консенсус сред експертите по отношение на тяхната значимост за конструкта.
Внимателното взаимодействие между експертната преценка и CVR гарантира, че елементите на скалата се оценяват задълбочено и се запазват само тези, които действително представят конструкта. Този повтарящ се процес, съчетаващ експертните оценки и изчисленията на CVR, в крайна сметка допринася за валидността на съдържанието на скалата.
Така че стремежът към валидност на съдържанието при разработването на скали е систематичен процес, който включва няколко основни стъпки. Генерирането на потенциални елементи от скалата изисква задълбочено разбиране на конструкта и внимателно изработване на ясни и недвусмислени твърдения. Експертните прегледи, в които участват експерти в съответната област, осигуряват ценна обратна връзка за усъвършенстване на елементите, повишаване на тяхната яснота и премахване на нерелевантните или излишните елементи. Освен това включването на коефициента на валидност на съдържанието (CVR) внася обективност в оценката на валидността на съдържанието, като позволява на изследователите обективно да оценят консенсуса между експертите по отношение на значимостта на всеки елемент. Взаимодействието между експертната преценка и CVR е от ключово значение за създаването на валидна и надеждна измервателна скала. В крайна сметка валидността на съдържанието не е единична стъпка, а непрекъснат процес на усъвършенстване, който гарантира, че скалата точно и изчерпателно отразява същността на целевия конструкт.
