評分者信度(scorer reliability)是指多箇評分者對同一組測試結果進行評分時的一致性程度。
評分者信度是信度(reliability)的一箇組成部分,主要關注不同評分者組間差異的一般趨勢,評分者信度分析的是不同評分者對同一樣本是否給出同一正確分數的指標,在評估多箇評分者對同一組測試結果的可靠性時非常重要,例如,在質量功能展開(QFD)中,會使用評分者信度作爲專家評分一致性的檢驗指標。
評分者信度分爲評分者內信度和評分者間信度,評分者內信度是同一個評分者對同一樣本在不同場合評分的一致性程度,而評分者間信度是測量不同評分者對同一樣本評分的一致性程度。