Intra-rater reliability and the role of experience : a comparative case

Abstract

This article aims to present the results of an investigation which seeks to determine whether experience plays an important role in increasing intra-rater reliability. The paper also provides an analysis that is carried out to determine if factors such as gender or rubric development affect raters’ reliability. Finally, a list of practical implications drawn from this investigation is provided.Este artículo presenta los resultados de una investigación en la cual se pretende determinar si la experiencia juega un papel importante en el aumento del nivel de confiabilidad de evaluación de un grupo de profesores universitarios. Además, se realiza un análisis para determinar si aspectos como el género o el desarrollo de una escala de evaluación tienen incidencia en la confiabilidad de los evaluadores. Finalmente, se realiza un apartado con algunas implicaciones prácticas desprendidas de esta investigación.