equipu
cienciainvestigaciónsoftwareestadística

 

 

The purpose of this study was to investigate a new way of evaluating interrater reliability that can allow one to determine if two raters differ with respect to their rating on a polytomous rating scale or constructed response item. Specifically, differential item functioning (DIF) analyses were used to assess interrater reliability and compared with traditional interrater reliability measures. Three different procedures that can be used as measures of interrater reliability were compared: (1) intraclass correlation coefficient (ICC), (2) Cohen’s kappa statistic, and (3) DIF statistic obtained from Poly-SIBTEST. The results of this investigation indicated that DIF procedures appear to be a promising alternative to assess the interrater reliability of constructed response items, or other polytomous types of items, such as rating scales. Furthermore, using DIF to assess interrater reliability does not require a fully crossed design and allows one to determine if a rater is either more severe, or more lenient, in their scoring of each individual polytomous item on a test or rating scale.

 

Fuente: https://doi.org/10.1177/0013164419899731

Publicaciones de este equipo
Comparte con tus amigos

Acerca de quién lo publicó

Hola mi nombre es Arnold Alejandro. Soy Parte de EQUIPU desde el 27 de June del 2017, puedes ver más sobre mi visitando mi perfil dando clic en mi foto.

¿Te interesaría crear tu propio artículo?

CREAR Artículo

Otros artículos que pueden interesarte

Artículo
Siempre que empezamos un nuevo año es un buen momento para hacer un poco de reflexión respecto a tendencias y avance de las buenas prácticas de g
Artículo
Todo un ciclo preparandose, 5 grupos una meta: Ganar el concurso de "My first Videogame 2.0".  Durante el ciclo 2015-1, estudiantes de distintas espe
Artículo
Estuvimos presentes en la feria E-QUIPU dando a conocer alas actividades del grupo ACT.
Artículo
El sábado 10 de marzo, AdelantePUCP estuvo presente en un evento organizado por la Secretaría Nacional de Juventudes de Acción Popular dirigido a l