Надеждността между експертите е ценен метод, когато в оценката е включена субективна преценка. Тя оценява степента на съгласие между двама или повече оценители или съдии, които оценяват едно и също съдържание или поведение. Високата надеждност между оценителите показва, че различните оценители дават съгласувани оценки, което предполага, че преценките са надеждни и могат да бъдат обобщени между различни оценители (Hallgren, 2012).
Надеждността между рецензентите е често използвана в различни области, като психология, медицина и образование, когато са необходими субективни оценки. Например в клинична обстановка няколко здравни специалисти могат да оценяват независимо симптомите на даден пациент и техните оценки трябва да показват висока надеждност между рецензентите, за да се гарантират последователни диагнози и планове за лечение.
За да се установи надеждността между отделните оценители, различни оценители оценяват едно и също съдържание или поведение, след което оценките им се сравняват. Степента на съгласие между оценителите се определя количествено, като често се използват статистически мерки като Капа на Коен или коефициенти на вътрешнокласова корелация. Тези статистически данни помагат на изследователите да оценят степента на консенсус или съгласуваност между оценките на оценителите.
