評分者信度是指多箇評分者給同一批人的答捲進行評分的一致性程度。以下是評分者信度的幾種計算方法：
評分者2人：可以使用皮爾遜積差相關或等級相關方法來計算評分者信度。
評分者多於2人：可以使用肯德爾和諧係數來估計評分者信度。其公式爲：K是評分者人數，N是被評的對象數（通常是考生數，每個考生一份試卷），Ri是第i個被評對象（考卷）被評的水平等級之和。
當評分者（K）爲3～20人，被評對象（N）爲3～7個時，信度是否符合要求可以直接查W表檢驗。
當被評對象多於7個，可以計算x²值，作x²檢驗。
以上方法可以幫助評估評分者的一致性和可靠性，從而提高心理與教育測量的準確性。