https://doi.org/10.7334/psicothema2019.306

Psicothema, 2020.Vol. 32 (nº 3). 390-398

   PDF

Ana Hernández¹, María Dolores Hidalgo², Ronald K. Hambleton³, and Juana Gómez-Benito⁴

¹ Universitat de València,
² Universidad de Murcia,
³ University of Massachusetts at Amherst, and
⁴ Universitat de Barcelona

Background: To improve the quality of test translation and adaptation, and hence the comparability of scores across cultures, the International Test Commission (ITC) proposed a number of guidelines for the adaptation process. Although these guidelines are well-known, they are not implemented as often as they should be. One possible reason for this is the broad scope of the guidelines, which makes them difficult to apply in practice. The goal of this study was therefore to draw up an evaluative criterion checklist that would help test adapters to implement the ITC recommendations and which would serve as a model for assessing the quality of test adaptations. Method: Each ITC guideline was operationalized through a number of criteria. For each criterion, acceptable and excellent levels of accomplishment were proposed. The initial checklist was then reviewed by a panel of 12 experts in testing and test adaptation. The resulting checklist was applied to two different tests by two pairs of independent reviewers. Results: The final evaluative checklist consisted of 29 criteria covering all phases of test adaptation: planning, development, confirmation, administration, score interpretation, and documentation. Conclusions: We believe that the proposed evaluative checklist will help to improve the quality of test adaptation.

Directrices de la Comisión Internacional de Test para la adaptación de test: un listado de verificación. Antecedentes: la Comisión Internacional de Test (ITC) propuso una serie de directrices para mejorar la calidad de la traducción y adaptación de los test y, consecuentemente, mejorar la comparabilidad de las puntuaciones a través de distintas culturas. Aunque estas directrices son bien conocidas, no se aplican tan frecuentemente como sería deseable. Este trabajo propone un listado de verificación de los criterios de cumplimiento asociados a las directrices de la ITC, que faciliten su implementación y sirvan de modelo para evaluar la calidad de las adaptaciones realizadas. Método: cada directriz de la ITC se operacionalizó a través de distintos criterios. Para cada criterio se propusieron niveles de aceptabilidad y excelencia. El listado inicial propuesto fue revisado por un panel de 12 expertos en el área de medición y adaptación de test. La versión resultante fue aplicada a dos test por dos pares de revisores independientes. Resultados: el listado final de verificación del grado de cumplimiento de las directrices consistió en 29 criterios que cubren todas las fases del proceso de adaptación de un test: planificación, desarrollo, confirmación, administración, interpretación de las puntuaciones y documentación. Conclusiones: se espera que el listado propuesto ayude a mejorar la calidad de los test adaptados.