Traditional scores versus IRT estimates on forced-choice tests based on a dominance model
Title (trans.)
Puntuaciones tradicionales y estimaciones TRI en tests de elección forzosa con un modelo de dominanciaEntity
UAM. Departamento de Psicología Social y MetodologíaPublisher
Colegio Oficial de Psicólogos del Principado de AsturiasDate
2016Citation
10.7334/psicothema2015.204
Psicothema 28.1 (2016): 76-82
ISSN
0214-9915 (print); 1886-144X (online)DOI
10.7334/psicothema2015.204Funded by
The research has been funded by the Ministry of Economy and Competitivity of Spain, project PSI2012-33343Project
Gobierno de España. PSI2012-33343Subjects
Forced-choice; Dominance model; Traditional scores; EAP; Elección forzada; Modelo dominancia; Puntuación tradicional; PsicologíaRights
Copyright © 2016 PsicothemaAbstract
Background: Forced-choice tests (FCTs) were proposed to minimize response biases associated with Likert format items. It remains unclear whether scores based on traditional methods for scoring FCTs are appropriate for between-subjects comparisons. Recently, Hontangas et al. (2015) explored the extent to which traditional scoring of FCTs relates to the true scores and IRT estimates. The authors found certain conditions under which traditional scores (TS) can be used with FCTs when the underlying IRT model was an unfolding model. In this study, we examine to what extent the results are preserved when the underlying process becomes a dominance model. Method: The independent
variables analyzed in a simulation study are: forced-choice format, number of blocks, discrimination of items, polarity of items, variability of intra-block diffi culty, range of diffi culty, and correlation between dimensions. Results: A similar pattern of results was observed for both models; however, correlations between TS and true thetas are higher and
the differences between TS and IRT estimates are less discrepant when a dominance model involved. Conclusions: A dominance model produces a linear relationship between TS and true scores, and the subjects with extreme thetas are better measured Antecedentes: los tests de elección forzosa (TEFs) fueron propuestos para reducir los sesgos de respuesta de ítems tipo Likert. Se cuestiona que los métodos de puntuación
tradicional (PT) empleados permitan hacer comparaciones entre-sujetos. Recientemente, Hontangas et al. (2015) exploraron cómo las PTs obtenidas con diferentes TEFs se relacionan con sus puntuaciones verdaderas y estimaciones TRI, mostrando las condiciones para ser utilizadas cuando el modelo subyacente es un modelo de unfolding. El objetivo del trabajo actual es comprobar si el patrón de resultados se mantiene con un modelo de dominancia. Método: las variables independientes del estudio de
simulación fueron: formato de elección forzosa, número de bloques, discriminación de los ítems, polaridad de los ítems, variabilidad de la dificultad intrabloque, rango de difi cultad del test y correlación entre dimensiones. Resultados: un patrón similar de resultados fue obtenido en ambos modelos, pero en el modelo de dominancia las correlaciones entre
PTs y puntuaciones verdaderas son más altas y las diferencias entre PTs y estimaciones TRI se reducen. Conclusiones: un modelo de dominancia produce una relación lineal entre PTs y puntuaciones verdaderas, y los sujetos con puntuaciones extremas son medidos mejor
Files in this item
Google Scholar:Hontangas, Pedro M.
-
Leenen, Iwin
-
Torre, Jimmy de la
-
Ponsoda, Vicente
-
Morillo, Daniel
-
Abad García, Francisco José
This item appears in the following Collection(s)
Related items
Showing items related by title, author, creator and subject.
-
Item Response Theory Models for Forced-Choice Questionnaires
Morillo Cuadrado, Daniel
2018-10-19