Psicothema, 2010. Vol. Vol. 22 (nº 4). 1018-1025

Nekane Balluerka, Arantxa Gorostiaga, Juana Gómez-Benito^* and María Dolores Hidalgo^**

Universidad del País Vasco, ^* Universidad de Barcelona and ^** Universidad de Murcia

Given that a key function of tests is to serve as evaluation instruments and for decision making in the fields of psychology and education, the possibility that some of their items may show differential behaviour is a major concern for psychometricians. In recent decades, important progress has been made as regards the efficacy of techniques designed to detect this differential item functioning (DIF). However, the findings are scant when it comes to explaining its causes. The present study addresses this problem from the perspective of multilevel analysis. Starting from a case study in the area of transcultural comparisons, multilevel logistic regression is used: 1) to identify the item characteristics associated with the presence of DIF; 2) to estimate the proportion of variation in the DIF coefficients that is explained by these characteristics; and 3) to evaluate alternative explanations of the DIF by comparing the explanatory power or fit of different sequential models. The comparison of these models confirmed one of the two alternatives (familiarity with the stimulus) and rejected the other (the topic area) as being a cause of differential functioning with respect to the compared groups.

Utilización de la regresión logística multinivel para identificar las causas del funcionamiento diferencial de los ítems. Dada la relevancia de los tests como instrumentos de evaluación y de toma de decisiones en los campos de la psicología y de la educación, la posibilidad de que algunos de sus ítems presenten un comportamiento diferencial constituye una preocupación central de los psicómetras. En las últimas décadas se han producido importantes avances con respecto a las técnicas diseñadas para detectar el funcionamiento diferencial de los ítems (DIF). Sin embargo, los hallazgos son escasos en lo que respecta a identificar las causas que lo explican. El presente trabajo aborda este problema desde la perspectiva del análisis multinivel. Partiendo del estudio de un caso del ámbito de las comparaciones transculturales, se utiliza la regresión logística multinivel para: 1) identificar las características de los ítems asociadas a la presencia de DIF; 2) estimar la proporción de la variación en los coeficientes de DIF explicada por tales características; y 3) evaluar explicaciones alternativas para el DIF comparando la capacidad explicativa o el ajuste de diferentes modelos. La comparación entre tales modelos permitió confirmar una de las dos alternativas (la familiaridad con el estímulo) y descartar la otra (el tema de estudio) como causa del funcionamiento diferencial de los ítems en los grupos comparados.