Test a utilizar:
DAT Test de Aptitudes Diferenciales
G.K. Bennet, H.G. Seashore y A.G.Wesman (The Psychological Corporation)
Adaptación Española de TEA Ediciones S.A.

1. Conocer un test de aptitudes de lápiz y papel y estar en condiciones de aplicarlo, de interpretar y de informar sus resultados.
2. Efectuar análisis propios del proceso de construcción de un test de aptitudes, interpretar e informar adecuadamente los estadísticos y resultados psicométricos resultantes.

La correcta realización de esta práctica implica la integración de conocimientos estadísticos, de análisis de datos, psicométricos y psicológicos y su plasmación adecuada en un informe profesional.

PRACTICA nº 7 del libro:
Sancerni, M.D., Meliá. J.L., González-Romá, V. y Díaz, J.V. (1992) Psicometría: Problemas y Prácticas. Valencia. Ed. Cristóbal Serrano.

En este manual se presentan ejemplos de cálculo de coeficientes en la parte de “problemas” y una serie de “problemas de estudio” que se asemejan parcialmente a algunas de las tareas a realizar en la práctica.

Para la correcta interpretación de los resultados estadísticos y psicométricos se recomienda consultar manuales de estadística descriptiva e inferencial y manuales de psicometría. Referencias bibliográficas sobre estos manuales pueden encontrarse en los programas de los módulos de análisis de datos y en los módulos de psicometría (teoría).

Esta Guía de la Práctica concreta y define los aspectos expresados en la práctica nº 7 del libro.

FASES DE LA PRACTICA:
1. Estudio del Material, del Test, del manual de las instrucciones.
Efectuar una autoaplicación para familiarizarse con la prueba.

2. Aplicación del material a los sujetos seleccionados.
Se recomienda practicar aplicaciones indivudales y después colectivas, siempre siguiendo las instrucciones del test.

Dada la duración del test se pueden hacer dos sesiones:

El test se presenta en dos formas, la forma L y la forma M pero solo hay que aplicar una de ellas (consultar disponibilidad en docimoteca).

Los cuadernillos pueden obtenerse en Docimoteca previa autorización del profesor por escrito utilizando modelo y reserva previa en la misma Docimoteca.

Variables adicionales a obtener de cada sujeto:
1) Sexo
2) Estudios que cursa.
3) Edad
4) Ultima nota en matemáticas o la asignatura mas semejante
5) Ultima nota en lengua o la asignatura más semejante

3. Corrección. se realizará de acuerdo con las instrucciones de corrección del manual del test.
A efectos de codificación todo acierto se codificara 1 y todo no-acierto de cualquier clase se codificara 0.

4. Disponer todos los datos en una matriz de datos: variables (items y variables adicionales) en columnas y casos en filas.
Puede utilizarse el editor del SPSS para esta finalidad o guardar en EXCEL y leer después con SPSS.

5. Efectuar los análisis psicométricos y estadísticos.

6. Realizar el informe.
 

1. Matriz de correlaciones entre los totales de las 6 pruebas del DAT y también un "total de totales" global.

2. Fiabilidad (coeficiente alfa) de cada una de las pruebas, excluido el CSA.

3. Correlación de cada  ítem con el total de la prueba en la prueba AR.

4. Pruebas t para copnrastar si existen diferencias significativas entre hombre y mujeres en las puntuaciones totales de cada una de las 6 pruebas y en la puntuacion total global.

5. Predicción de las notas que obtendrán estos sujetos en la próxima evaluación en matemáticas y en lengua utilizando como predictores los totales de las 6 pruebas del DAT . Para ello necesitara calcular dos ecuaciones de regresión lineal múltiple y despues utilizar estas ecuaciones para obtener los valores estimados.
 

Estructura del Informe:
La estructura del informe debe ser la siguiente:

A. Portada.
En la portada exterior se hará constar:
- El título de la práctica y el test aplicado.
- El Centro educativo en que se ha aplicado con el nombre de la persona de contacto, cargo, dirección del centro y teléfono de contacto para verificación. Si se hubiera aplicado a personas de más de un centro (no recomendable) se presentarán los mismos datos de cada centro y persona.
- Los apellidos y nombre de los estudiantes autores de la práctica, con el grupo de prácticas a que pertenece cada estudiante (por ejemplo, EC). (Máximo 6 estudiantes por grupo).

B. Indice
Un índice con los títulos de los apartados y la página en que están (primera página después de la portada).

C. Introducción.
Un apartado de introducción en el que se recoge:
1. Descripción del proceso de trabajo seguido, enumerando las fases de trabajo.
2. Condiciones de aplicación del instrumento.
3. Descripción del instrumento de medida ¿Qué es y qué mide? ¿Cuáles son sus características principales? Esta información se encuentra en el manual, pero no se solicita que se “copie” un trozo de manual.

D. Descripción de la Muestra.
 1) N de la muestra (Número de casos).
2) Grado educativo que cursan.
Si cursan más de un grado o están en más de un centro descripción de la tabla de frecuencias y porcentajes de estas variables.
3) Descripción de la distribución de edad (tabla de frecuencias y porcentajes, media y desviación típica)
4) Descripción de la distribución de sexo (frecuencias y porcentajes).

E. Descripción de las variables principales del estudio.
1) Descripción de las variables puntuaciones totales de cada uno de los 6 factores (VR, AR, NA, SR, MR y CSA) y del total general obtenido por suma de los totales de los 6 factores.
2) Descripción de cada una de las variables referidas a notas anteriores en matemáticas y lengua.

F. Análisis Psicométricos.
Esta sección contiene los resultados de los análisis efectuados y los comentarios e interpretación de los mismos.

F1. Correlaciones entre las pruebas de aptitudes diferenciales.
Se aplica a los totales de los 6 factores y al total general.
Se presenta una tabla de correlaciones entre estas variables, con niveles de significación y la interpretación de estas correlaciones y sus niveles de significación.

F2. Fiabilidad de cada prueba
Se aplica a cada uno los factores excluido el CSA. (h¡Hay que calcular 5 coeficientes alfa).
Se presenta una tabla de coeficientes alfa debidamente interpretados.

F3. Homogeneidad de los items de la prueba AR
Se aplica a todos los items de una sola prueba, la AR.
Se presentan las correlaciones (coeficientes de homogeneidad) de todos los items de una prueba con su total, y sus niveles de significación. Se presenta la interpretación de estos coeficientes y sus niveles de significación.

F4. Contraste de diferencias en función del sexo.
Se aplica a los totales de los 6 factores y al total general.
De cada uno de los 7 contrastes se presenta y se interpreta el test de Levene y la prueba t correspondiente, asumiendo o no asumiendo varianzas iguales.
De cada contraste se presentan las medias y desviaciones típicas para cada grupo (varones y mujeres) y se interpretan tanto estos estadísticos descriptivos como los contrastes (test de Levene y pruebas t).

F5. Pronóstico de puntuaciones académicas.
Como variables independientes en cada ecuación de regresión se utilizan los totales de los 6 factores.
Como variable dependientes se utilizan, en dos ecuaciones de regresión múltiple separadas, las variables de notas anteriores en matemáticas y lengua.

Se presentan en tablas y se interpretan:
1) Los coeficientes de determinación múltiple,
2) Las ecuaciones de regresión, y
3) Las puntuaciones pronosticas comparadas con las puntuaciones reales.
 

G. Apartados de análisis adicionales
Opcionalmente, si se estima se puede realizar e incluir algún análisis más.
Un análisis de ampliación sugerido es efectuar perfiles de los sujetos e interpretarlos en términos psicométricos y psicológicos. Se incluirían las hojas de perfiles y un comentario de cada uno de ellos.

H. Conclusiones y comentarios generales.
 Síntesis de las principales conclusiones obtenidas en los apartados de análisis.
 Dificultades halladas en la aplicación de la prueba.
 Comentarios generales sobre el proceso de realización de la práctica.

I. Bibliografía utilizada
Debe estar correctamente citada.

J. Anexo:
Hojas de respuesta originales de los sujetos.
 

No incluir en el informe:
1) Outputs “en crudo” del ordenador.
Los outputs de ordenador se importan (copiar y pegar), se formatean adecuadamente, se les pone un encabezado y se presentan como tablas en el apartado oportuno.
2) Hojas de matriz de datos
3) Información irrelevante e innecesaria, p.e. trozos copiados del manual del test, de manuales de estadística o de psicometría o peor de enciclopedias. No acumular información por “llenar páginas”.
4) Páginas en blanco.
5) Dibujos, adornos o gráficos innecesarios.

Se pueden incluir si se estima necesario gráficos estadísticos, que pueden realizarse fácilmente con SPSS, (p.e. histogramas en la descripción de variables o algunos diagramas de dispersión en las correlaciones o en las regresiones) siempre que ayuden a expresar los conceptos estadísticos analizados.

El énfasis de la práctica está en la capacidad de realizar un proceso completo e integrado de trabajo profesional y no en el mero cálculo estadístico, por ello todos los grupos de estadísticos deben aparecen adecuadamente interpretados y comentados.

En la interpretación de estadísticos en lo posible se considerarán sucesivamente 4 niveles de interpretación. A continuación se mencionan estos cuatro niveles y se explican para el ejemplo concreto de una correlación entre un ítem y el total, pero la misma secuencia de interpretación y comentario puede aplicarse en la medida de lo posible a los otros estadísticos y resultados:

1) Nivel estadístico descriptivo
(p.e. grado de asociación lineal que expresa una correlación ítem – total ¿Qué significa está magnitud y signo de la correlación en términos del grado de asociación lineal entre las variables? ¿Qué clase de diagrama de dispersión subyace a este resultado?)

2) Nivel estadístico inferencial,
donde corresponda (p.e., nivel de significación asociado a una correlación ítem – total ¿Qué significa la probabilidad asociada a esta correlación?).

3) Nivel psicométrico
(p.e. interpretación de la correlación ítem – total como homogeneidad del ítem ¿Qué items son homogéneos y cuales no son suficientemente homogéneos? ¿Qué significa que un ítem sea homogéneo con el total?, ¿Qué implicaciones tendría esto para la construcción de la escala?)

4) Nivel psicológico
(p.e., significado en términos psicológicos de por qué un cierto ítem correlaciona tanto o tan poco con el total de la escala, p.e. : ¿Qué parece estar midiendo el ítem y el total que justifiquen estos resultados? ¿Qué sentido psicológico tienen estos resultados?)
 

¿Cómo se describen variables cuantitativas en un informe?
En la descripción de cada variable cuantitativa (p.e., la edad, los totales de factores, las notas obtenidas) se presenta siempre al menos la media, la desviación típica y la distribución de frecuencias y porcentajes (tabulación de la variable).
Los estadísticos siempre se presentan en forma de tablas correctamente identificadas con un encabezado (nunca como un trozo de “output” de ordenador). Las tablas se presentan numeradas (p.e., Tabla 1. Estadísticos descriptivos de los totales en los factores del DAT”, “Tabla 2. Descripción frecuencial de la variable VR”. )
Toda tabla debe siempre acompañarse con al menos un párrafo que comente su significado donde se cita la tabla y se explica el significado de la información que contiene y la interpretación de la misma. (p.e. “En la tabla 2 podemos observar la distribución de frecuencias del total del factor VR. Como podemos observar la moda es X y la distribución presenta una marcada asimetría y poca dispersión, lo que significa que …”)

Opcionalmente, pueden presentarse y comentarse además otros estadísticos que resulten adecuados, si se estima necesario (p.e. asimetría, curtosis, coeficiente e variación…).
De modo opcional, también resulta muy útil presentar de cada variable cuantitativa un diagrama de barras (si la variable se considera discreta) o un histograma (si la variable se considera continua). Los gráficos también deben tener un encabezado, ir numerados y ser citados en el párrafo en que se comente esa información.
Tablas y gráficas se insertan en el texto (se puede hacer con “copiar y pegar” de diversas formas) en un punto lo más próximo posible al párrafo en que se comentan.

En el comentario de las variables referidas a notas es necesario, además, especificar exactamente de qué asignaturas se obtuvo información, a qué periodo se refiere la información y la fuente de la misma (p.e. “Las notas de idioma extranjero se refieren a las calificaciones de inglés finales del curso anterior (primero de ESO) obtenidas de los expedientes, o las notas de ciencias se refieren a las calificaciones globales en la asignatura “Física y Química” de Segundo de BUP del último trimestre obtenidas de los estudiantes).

¿Cómo se describen variables cualitativas en un informe?
En la descripción de cada variable cualitativa (p.e., el sexo, el curso si los sujetos pertenecieran a más de uno) se presenta siempre la distribución de frecuencias y porcentajes (tabulación de la variable).
Opcionalmente,  puede presentarse además un gráfico adecuado a la naturaleza de la variable (p.e. puede utilizarse un gráfico de pastel para sexo).
Tablas y gráficos siempre encabezados y numerados y citados en el párrafo en que se comentan.

Muy importante:
Se recomienda comenzar inmediatamente la realización de la práctica .

La valoración de la práctica se efectúa a través del informe y es de naturaleza cualitativa.

La calificación de aprobado exige realizar y presentar correctamente todos los puntos de la práctica.
Se puede obtener notable o nota superior mediante una mejor realización de los puntos básicos de la práctica o realizando análisis e interpretación más allá de los mínimos establecidos en la práctica nº 7. En cualquier caso una calificación de notable o superior implica que todos los aspectos básicos han sido resueltos adecuadamente y sin errores importantes.
 

Algunas indicaciones acerca de qué criterios se consideran al leer y evaluar la práctica:
La práctica es evaluada en 3 aspectos:
1) Datos
2) Análisis
3) Informe.

Datos:
¿Identifica correctamente el Centro, la fecha de aplicación y la persona de contacto?
¿Se ha podido verificar que efectivamente se administraron las pruebas en condiciones al menos aceptables?
¿Se incluyen en el anexo las hojas de respuesta originales?
¿Las respuestas presentan una resolución verosímil conforme a las características de los sujetos y los tiempos de administración?
¿Explica bien las condiciones de aplicación (cuándo, cómo, por quién, …)?
¿Explica bien las dificultades encontradas en el proceso de aplicación (tiempos, conducta de los sujetos, interrupciones …)?
¿Se han tomado notas de observación de los sujetos durante la administración?

Análisis:
¿Efectúa los análisis estadísticos básicos correctamente con el ordenador?
¿Incluye análisis adicionales bien realizados?
¿Los resultados son compatibles con la clase de datos?

Informe:

Aspectos generales:
¿Explica los conceptos estadísticos, psicométricos y psicológicos implicados en cada análisis y resultado?
¿Efectúa una interpretación correcta y adecuada de los resultados en los niveles estadístico, (tanto descriptivo como inferencial), psicométrico y psicológico?
¿Interpreta tanto los estadísticos descriptivos, frecuencias y gráficos –si los hay- como los resultados inferenciales –p.e., niveles de significación?
¿Relaciona los resultados con otros estudios –particularmente con los resultados que presenta el manual del test?
¿Relaciona los resultados con otros estudios sobre aptitudes diferenciales?
¿Identifica y trata de explicar los factores o circunstancias que pueden explicar los resultados?
¿Hay errores de interpretación o de lectura de los resultados?
¿Hay un comentario global, general, resumen y conclusiones?
¿Hay una introducción adecuada al trabajo?
¿Se introduce adecuadamente cada apartado mencionando brevemente los objetivos del mismo y las técnicas y análisis que se van a presentar?
¿Hay un índice adecuado?
¿Presenta las tablas y gráficos correctamente encabezados, numerados y citados en el texto?
¿Evita presentar trozos copiados de información de manuales u otras fuentes?
¿Cita adecuadamente las fuentes bibliográficas que utiliza y presenta una bibliografía correctamente?
¿El informe está ordenado y completo?
¿La exposición de cada punto es ordenada y sistemática?
¿El informe cumple las normas de presentación señaladas?
 

Para pruebas t:
¿Utiliza adecuadamente la información descriptiva (medias y desviaciones de los grupos)?
¿Explica el proceso de decisión en las pruebas t, es decir, la elección de la prueba t adecuada a partir del test de Levene?
¿Interpreta el test de Levene?
¿Interpreta la prueba t adecuada del modo correcto?
¿Utiliza adecuadamente le lenguaje del contraste de hipótesis?

Para Regresión:
¿Interpreta y comenta adecuadamente la correlación múltiple, la correlación múltiple al cuadrado, los coeficientes de regresión?
¿Interpreta otros estadísticos del análisis de regresión?
¿Compara las puntuaciones pronosticadas y las reales y capacidad predictiva mostrada?
¿Presenta análisis opcionales de ampliación, p.e. un diagrama de dispersión entre puntuaciones reales y pronosticada en alguna o todas las materias?