aplicado a la evaluación
de las actitudes sobre la Ciencia,
la Tecnología y la Sociedad (CTS) *
ÁNGEL VÁZQUEZ-ALONSO
Mª ANTONIA MANASSERO-MAS
JOSÉ ANTONIO ACEVEDO-DÍAZ
PILAR ACEVEDO-ROMERO
MESA 4
*
Este estudio ha sido financiado por la Conselleria d’Economia, Hisenda i Innovació del Govern de les
Illes Balears a través de las ayudas para llevar a cabo acciones especiales de investigación, desarrollo
tecnológico e innovación (2005).
1. Introducción
2
importante esfuerzo para profundizar en las razones que tienen los estudiantes al
construir sus respuestas.
Todas las cuestiones del COCTS tienen un formato típico de opción múltiple similar
pero diferente, porque el número de opciones es variable según la cuestión. Todas se
inician con un texto que plantea un tema concreto, seguido por varias frases cortas,
cada una etiquetada con una letra en orden alfabético, que desarrollan diferentes
razones para responder al tema planteado (tabla 1). Dentro de cada cuestión, el
conjunto completo de las frases ofrece una serie amplia de distintas posiciones
razonadas sobre el tema; las actitudes se definen mediante la elección o la
valoración de las frases opcionales. Esta manera de definir actitudes indica que el
cuestionario no impone a la persona que responde ningún valor o modelo concreto
sobre CTS; al contrario, las personas que responden definen libremente sus actitudes
mediante sus elecciones sobre las frases.
La versión en castellano del COCTS, el manual de uso y las claves de puntuación se
han incorporado a la extensa biblioteca del Test Collection of Educational Testing
Service (en línea www.ets.org).
El formato de respuesta básico propuesto para el VOSTS por sus autores consiste
en seleccionar una frase entre las varias existentes en cada cuestión (Modelo de
Respuesta Única o MRU) y así se ha usado para evaluar actitudes (Manassero y
Vázquez, 1998).
3
Los cuestionarios Likert típicos suman las puntuaciones obtenidas en cada frase para
obtener una puntuación global resultante de todas ella, una práctica que también es
fuente de numerosos problemas de validez y de interpretación porque tiene
implícitas dos hipótesis que raramente se cumplen:
• Se supone que todas las frases son equipotentes (tienen el mismo peso)
en determinar la puntuación resultante.
• Se supone que todas las frases son homogéneas en relación al objeto
que describen, y ello justifica que se puedan sumar (hipótesis de
unidimensionalidad de constructo).
Para verificarlas, es necesario un análisis más detallado de las frases para asignarles
el valor estimado que aportan al objeto de actitud. Este proceso, habitual en la
construcción de cuestionarios de actitudes, se denomina escalamiento de estímulos
(Eagly y Chaiken, 1993), y consiste en clasificar las frases según la posición que
marcan en relación al objeto de actitud.
El fin del escalamiento es producir un guión o rúbrica para las frases que permite
al investigador calificar la respuesta sobre cada frase, que en el marco de la
Psicología Social, ha sido resuelto mediante los métodos de escalamiento de
estímulos realizados por paneles de jueces (Eagly y Chaiken, 1993; Stahlberg y Frey,
1990).
El escalamiento de las diversas frases de las cuestiones del COCTS en una de las tres
categorías anteriores se ha descrito con detalle en otro lugar (Vázquez, Manassero y
Acevedo, 2005) y sus resultados globales fueron los siguientes (ver un ejemplo de las
categorías asignadas a una cuestión en la tabla 1):
A) Apropiada, adecuada: 143 frases
P) Plausibles: 274 frases
N) Ingenua: 220 frases
4
Tabla 1. Cuestión del COCTS con las categorías asignadas por los jueces a cada una
de las frases después del proceso de escalamiento y las respuestas reales en la escala
1 – 9 emitidas por un profesor (R).
Categorías R
A. muy parecida a la ciencia. Plausible 1
B. la aplicación de la ciencia. Ingenua 6
C. nuevos procesos, instrumentos, maquinaria, herramientas, Plausible 3
aplicaciones, artilugios, computadores o aparatos prácticos para el
uso de cada día.
D. robots, electrónica, computadores, sistemas de comunicación, Plausible 3
automatismos, tecnología.
E. una técnica para construir cosas o una vía de resolver problemas Plausible 5
prácticos.
F. inventar, diseñar y probar cosas (por ejemplo, corazones Plausible 3
artificiales, computadores, vehículos espaciales).
G. ideas y técnicas para diseñar y hacer cosas, para organizar a los Adecuada 8
trabajadores, la gente de negocios y los consumidores, para el
progreso de la sociedad.
H. saber como hacer cosas (instrumentos, maquinaria, tecnología). Plausible 8
1. No entiendo la cuestión.
2. No sé lo suficiente sobre el tema para seleccionar una opción
3 Ninguna de las opciones satisface básicamente mi opinión.
La aplicación práctica del MRM requiere que los respondientes valoren cada una
de las múltiples frases de las cuestiones. En cada cuestión, se obtienen tantos valores
como número de frases diferentes contiene. Puesto las frases están categorizadas en
distintos grupos que representan unas posiciones que tienen en cuenta la perspectiva
aportada por el cuerpo de conocimientos de la historia, la filosofía y la sociología de
la ciencia desde la perspectiva de la filosofía, historia y sociología de la ciencia, la
valoración emitida por los respondientes en cada frase debe calificarse según la
categoría de cada frase. Por otro lado, las cuestiones del COCTS están formadas por
un número diferente de frases y tienen diferente estructura de las categorías que
corresponden a las frases. Por ello, un objetivo pendiente e importante del
desarrollo del MRM es conseguir una medida cuantitativa normalizada, cuya
5
interpretación sea válida, fiable e invariante para todas las cuestiones, con
independencia de la estructura de categorías en la cuestión empleada (Chaiken,
Pomerantz y Giner-Sorolla, 1995; Petty y Krosnick, 1995).
En Psicología Social se recomiendan escalas simétricas con una parte positiva y una
negativa, que reflejen las actitudes consideradas positivas y las actitudes negativas
(Eagly y Chaiken, 1993; Petty y Krosnick, 1995). En este caso se ha elegido un rango
entre –1 (más negativo) y +1 (más positivo) para los valores del índice normalizado.
El segundo rasgo del índice normalizado se refiere a la interpretación y significado
general de los valores resultantes de la construcción y cálculo. La idea general es que
las actitudes positivas se corresponden con una mayor identificación con las
categorías asignadas por los jueces a cada frase; en particular, el valor máximo del
índice (+1) significa que la puntuación directa del respondiente en una frase
coincide con la categoría asignada a esa frase; por el contrario, el valor más negativo
del índice (-1) representaría la máxima oposición de la puntuación del respondiente
con la categoría correspondiente a la frase. Los valores intermedios del índice
indican mayor o menor grado de identificación con la categoría asignada según que
sean más positivos o más negativos.
Escala directa 9 8 7 6 5 4 3 2 1
Adecuadas Na 4 3 2 1 0 -1 -2 -3 -4
Plausibles Np -2 -1 0 1 2 1 0 -1 -2
Ingenuas Nn -4 -3 -2 -1 0 1 2 3 4
6
El proceso de correspondencia entre las puntuaciones directas emitidas por los
estudiantes y los valores del índice actitudinal depende del tipo de categoría de la
frase (adecuada, plausible o ingenua) y son proporcionales a la distancia entre la
puntuación directa asignada y la puntuación ideal de la categoría. En las frases
categorizadas como adecuadas la actitud más valiosa (o más rechazable) será aquella
que muestra un acuerdo (o desacuerdo) total con la frase, que se manifiesta en
puntuaciones directas más altas (o bajas).
Por el contrario, en las frases categorizadas como ingenuas la actitud más valiosa (o
más rechazable) será aquella que reconoce un desacuerdo (o acuerdo) total, que se
manifiesta en puntuaciones directas más bajas (altas). En las posiciones plausibles,
que se caracterizan por reflejar una posición parcialmente adecuada sobre el tema,
la actitud más valiosa (más rechazable) será aquella que reconoce un acuerdo parcial
(o extremado, alto o bajo), que se manifiesta en puntuaciones directas intermedias
(o extremas, altas o bajas).
7
Una vez definidos los índices actitudinales normalizados de cada frase, se puede
calcular un índice de actitud para cada cuestión, que representaría la actitud global
hacia esa cuestión. Para hacer este cálculo se podrían usar dos vías que dan lugar a
dos índices diferentes (tabla 4):
• Índice de actitud global medio de las frases (MGAI): es la media
aritmética de los índices del conjunto de las frases en cada cuestión. Por
definición, cada frase tiene el mismo peso en este índice; en consecuencia,
la categoría (adecuada, ingenua o plausible) con mayor número de frases
pesa más en este índice (segunda columna de la tabla 4).
• Índice de actitud global ponderado de las categorías (WGAI): es la
media de las tres medias aritméticas de cada categoría. Para ello se calcula
primero, por separado, el promedio del conjunto de las frases adecuadas,
plausibles e ingenuas, en cada item, obteniendo tres índices (uno por cada
categoría) y después se calcula el promedio de éstos tres índices de
categoría.
Por definición, cada categoría tiene el mismo peso en este índice, con independencia
del número de frases pertenecientes a cada una de ellas (tercera columna de la tabla
4).
Dado que los items del cuestionario tienen una estructura muy variable, tanto por el
diferente número de frases total en cada item, como por el diferente número de
frases correspondientes a cada categoría;, pero sin embargo, todos los items tienen
las mismas tres categorías, el índice ponderado WGAI representa una misma
interpretación para todos los items (el promedio de las tres categorías), por lo que
se usará para representar la actitud global de cada item, aunque su cálculo es un
poco más engorroso.
8
Tabla 4. Modelo de Respuesta Multiple (MRM): Aplicación al cálculo numérico del
caso de la respuesta del profesor de la tabla 2.
Puntos Índice
Puntos Índices actitudinales de
Sentencias Categoría actitudinales global
directos categorías
directos ponderado
Adecuado Plausible Ingenuo
C10211A P 1 -1 -1
C10211B I 6 -0.25 -0.25
C10211C P 3 0 0
C10211D P 3 0 0
C10211E P 5 1 1
C10211F P 3 0 0
C10211G A 8 0.75 0.75
C10211H P 8 -0.5 -0.5
Media 0.000 0.75 0.08 -0.25 0.19
Índice global actitudinal medio 0.000
Los índices actitudinales globales, que representan la actitud, son parámetros que
poseen varias cualidades psicométricas valiosas para la investigación y la evaluación:
• La escala métrica y sus puntuaciones son las mismas para todas las
cuestiones, lo cual unifica los cálculos posteriores y las aplicaciones
estadísticas cuantitativas.
• Tienen un significado invariante para todas las cuestiones. Esta es una
propiedad especialmente apreciada para representar la variedad de
cuestiones del COCTS cuya estructura es tan diversa cuestiones más largas,
más cortas, con diferente número de frases en las tres categorías, etc.).
• Los índices actitudinales de cada frase constituyen indicadores que
permiten análisis cualitativos exhaustivos, para profundizar en el
pensamiento individual sobre cada tema, apoyados en indicadores
cuantitativos.
• Los índices permiten medidas y análisis globales aplicando conjuntos de
cuestiones para investigaciones temáticas específicas, comparaciones entre
grupos, análisis cruzados entre grupos o entre cuestiones de la misma
persona, y en suma, todos los procesos de la estadística inferencial para
contrastar hipótesis.
9
7. Conclusiones
Estas mejoras metodológicas del COCTS, que permiten tanto el análisis cualitativo
como la aplicación cuantitativa de la estadística inferencial y la comparación de
grupos, especialmente en contextos de investigación, deben aplicarse empíricamente
para mostrar sus posibilidades y consolidar una línea de investigación fructífera y
sistemática. Metodológicamente, estas propiedades permiten realizar evaluaciones e
investigación con garantías de validez y fiabilidad superiores a cualquier diseño
anterior. Los resultados de los estudios y aplicaciones de investigación y evaluación
emprendidos con base en esta metodología serán una fuente valiosa para el contraste
y la confirmación de sus posibilidades y expectativas (Manassero y Vázquez, 1999;
Manassero, Vázquez y Acevedo, 2001).
10
Bibliografía citada
11
Rubba, P.A. y Harkness, W.L. “Examination of preservice and in-service secondary
science teachers' beliefs about Science-Technology-Society interactions”. Science
Education, 77, 407-431, 1993.
Rubba, P.A., Schoneweg-Bradford, C.S. y Harkness, W.L. “A new scoring procedure
for the Views on Science-Technology-Society instrument”. International Journal of
Science Education, 18, 387-400, 1996.
Schibeci, R.A. “Attitudes to science: Un update”. Studies in Science Education, 11,
26- 59, 1984.
Shrigley, R.L. y Koballa Jr., T.R. “A decade of attitude research based on Hovland's
learning model”. Science Education, 76, 17-42, 1992.
Stahlberg, D. y Frey, D. “Actitudes I: estructura, medida y funciones”. En M.
Hewstone, W. Stroebe, J.P. Codol y G.M. Stephenson (Dirs.), Introducción a la
Psicología Social (pp. 149-170). Barcelona: Ariel, 1990. [Attitudes I: Structure,
measurement, and functions, Introduction to Social Psychology (1988)].
Vázquez, A., Acevedo, J.A., Manassero, M.A. y Acevedo, P. “Cuatro paradigmas
básicos sobre la naturaleza de la ciencia”. Argumentos de Razón Técnica, 4, 135-176,
2001. En línea en Sala de Lecturas CTS+I de la OEI, 2003. <http://www.campus-
oei.org/salactsi/acevedo20.htm>.
Vázquez, A. y Manassero, M.A. “Actitudes relacionadas con la ciencia: una revisión
conceptual”. Enseñanza de las Ciencias, 13, 337-346, 1995.
Vázquez, A. y Manassero, M.A. “Response and scoring models for the ‘Views on
Science-Technology-Society' instrument”. International Journal of Science Education,
21, 231-247, 1999.
Vázquez, A., Manassero, M. A. y Acevedo, J. A. “Análisis cuantitativo de ítems
complejos de opción múltiple en ciencia, tecnología y sociedad: Escalamiento de
ítems”. Revista Electrónica de Investigación Educativa, 7(1), 2005. Consultado
4/3/2006 en http://redie.uabc.mx/vol7no1/contenido-vazquez.html.
Wareing, C. “A Survey of Antecedents of Attitudes Toward Science”. Journal of
Research in Science Teaching, 27, 371-386, 1990.
ÁNGEL VÁZQUEZ-ALONSO
Facultad de Educación. Universidad de las Islas Baleares.
angel.vazquez@uib.es
Mª ANTONIA MANASSERO-MA
Departamento de Psicología. Universidad de las Islas Baleares.
ma.manassero@uib.es
PILAR ACEVEDO-ROMERO
IES “Fray Luis de León” de Salamanca.
pi_acevedo@yahoo.es
12