Testing-Quest

Todos los proyectos de Testing-Quest se desarrollan mediante contratos-convenio a través de la Fundació Bosch y Gimpera de la Universidad de Barcelona.

El ámbito de actuación es la investigación por contrato en el marco de la transferencia de conocimiento entre universidad y empresa.

La FBG dispone de varios modelos de acuerdos ajustados a diferentes tipos de relación con las organizaciones interesadas. En función de cada caso se aplica el modelo más adecuado.

All the Testing-Quest projects are developed with contracts/agreements through the Bosch i Gimpera Foundation from the University of Barcelona.

The area of intervention is contracted research within the framework of knowledge transfer between the university and the business world.

The Bosch i Gimpera Foundation has a number of agreement models available according to the different kinds of relationships between the interested parties. The most appropriate model is selected following suitability criteria.

Testing-Quest incluye una aplicación Web que efectúa el control de calidad de las cualidades métricas de un test, examen o cuestionario. El programa es una derivación de desarrollos anteriores y forma parte del catálogo de tecnologías a licenciar de la Fundació Bosch y Gimpera.

Para el análisis se precisa del archivo de datos con la matriz de respuestas de los examinados al test, y clave de puntuación, en una estructura simple (formato hoja de cálculo). Opcionalmente, en función del proyecto, también requiere el original de la prueba, datos descriptivos de las preguntas y de los examinados así como información contextual del proceso de evaluación en que se aplica el test.

A modo de ensayo la opción Análisis ofrece la posibilidad de practicar diferentes análisis de bancos de datos de prueba.

Testing-Quest includes an online application which carries out a quality control of the metric qualities of a test, exam, and questionnaire. The program has been created from previous developments and forms part of the catalog of licensed technologies from the Bosch i Gimpera Foundation.

In order to carry out the analysis, data from the examinees’ response matrix, the scoring key, and a simple structure (worksheet format) are required. Optionally, depending on the function of the project, the original exam, descriptive data of the questions and examinees, and contextual information regarding the evaluation process may be needed.

Testing-Quest admite ítems de puntuación dicotómica (binarios, alternativa múltiple,…) y también graduada (Rating Scales, tipo Likert,..).

Tras cargar el archivo de datos el programa efectúa tres tipos de análisis.

El primero proporciona indicadores gráficos y numéricos del funcionamiento general del test.

Testing-Quest allows dichotomous (e.g. binary format, multiple-choice) and graduated (e.g. rating scales, Likert) item scoring.

Once the data file has been uploaded the program carries out three kinds of analysis.

The first shows graphic and numerical indicators regarding the general functioning of the test.

El segundo informa de la adecuación de las preguntas, de cada una de sus alternativas de respuesta y de las respuestas en blanco (omisiones). Es un análisis principalmente gráfico que informa del funcionamiento de cada ítem como pieza del examen. Al igual que en desarrollos anteriores aquí se analiza tanto las respuestas como las no respuestas.

The second describes the suitability of the questions, each of the answer alternatives, and the blank responses (omissions). It is basically a graphic analysis which provides information about the functioning of each item representing part of the exam. As in the previous analysis it evaluates both answers and omissions.

El tercer bloque informa de las puntuaciones de los examinados y sus índices de coherencia de respuesta y de coincidencia de errores (hábitos de estudio, sospecha de copia, etc.).

The third block depicts the examinees’ scores, their indices of response coherency, and error matching (e.g. study habits, suspicions of copying).

Todos estos resultados pueden conducir a cambios en la clave de corrección, a la eliminación de preguntas, recodificación de respuestas, identificación de examinados con respuestas anómalas, etc. Se trata de un proceso cíclico de depuración del test original que se repite hasta converger en la versión óptima del mismo con los mejores indicadores de calidad.

Este análisis se ha diseñado para dar respuesta a procesos de auditoría de test a gran escala y su aplicación viene condicionada por los datos disponibles, el tipo de proyecto y el modelo de contrato. A modo de ensayo a continuación se ofrece la posibilidad de analizar con diversos bancos de datos de prueba.

All of these results can lead to changes in the answer key, elimination of questions, re-coding of answers, identification of examinees with anomalous responses and the like. It is cyclical refinement process of the original exam which can be repeated until the optimum version with the best quality indicators is obtained.

This analysis has been designed for audits of large scale tests and its application depends on the data available, the type of project, and the contract model. To practice with this tool there is the possibility of analyzing different test databases.

Análisis banco de datos

Test Databases

Desde 1990 el equipo de Testing-Quest ha colaborado en proyectos psicométricos con

From 1990 the Testing-Quest team have collaborated in psychometric projects with a number of