(SLGHPLRORJtD&OtQLFD2Q/LQH

3URI/XLV)9DOHUR-XDQ

BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

$1/,6,6'(/$&21&25'$1&,$

&RQFRUGDQFLDHQWUHSUXHEDVGLDJQyVWLFDVFXDOLWDWLYDVQRPLQDOHV

Contenido:
1. Introduccin:Concepto y utilidades
2. Metodologa:
Ejemplo
Tabulacin
Anlisis: ndice Kappa
3. Caractersticas del ndice Kappa
4. Bibliografa


,QWURGXFFLyQDODQiOLVLVGHODFRQFRUGDQFLD

&RQFHSWR

En unidades anteriores hemos visto como en la prctica clnica es frecuente comparar,

con un estndar, tcnicas o procedimientos diagnsticos (o de medida) nuevos, con el
fin de determinar su YDOLGH] y, por lo tanto, su utilidad en la prctica clnica. A menudo,
se comparan diferentes pruebas con el fin de ver cul de ellas tiene los mejores ndices
de sensibilidad y especificidad. En este proceso se determina si la prueba nueva tiene un
grado suficiente de acuerdo para su utilizacin.
La 9DOLGH], es la capacidad para medir lo que realmente quiere medir. Una medida de
peso es vlida si se corresponde con el peso real de la persona que estamos pesando en
ese momento. Una prueba diagnstica es vlida cuando clasifica al enfermo como
enfermo. Cuando la medida se aleja de la verdad, estamos cometiendo un sesgo y, por
lo tanto, se produce una alteracin de la validez.
Ahora bien, qu ocurrira si nosotros volvemos a aplicar la misma prueba o repetimos la
medicin al mismo paciente, obtendramos el mismo diagnstico o, por el contrario el
resultado, sera diferente?. Podemos ILDUQRV de los resultados de la prueba, FRLQFLGHQ
en todas las ocasiones?.
La )LDELOLGDG R UHSURGXFLELOLGDG, es la capacidad de una medicin para obtener el
mismo valor cuando se realiza sobre la misma muestra en ms de una ocasin.
La &RQFRUGDQFLD es sinnimo de reproducibilidad. Evala si las diferentes pruebas
producen UHVXOWDGRVVLPLODUHV cuando se aplican a los mismos pacientes en FRQGLFLRQHV
VLPLODUHV.
La concordancia, tambin se emplea para evaluar el acuerdo entre distintos
observadores omedidas repetidas realizadas por un mismo observador. La variacin de

(SLGHPLRORJtD&OtQLFD2Q/LQH

3URI/XLV)9DOHUR-XDQ

BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

un observador respecto de s mismo, de un estandar o de otros observadores, se puede

medir por medio de la concordancia alacanzada al examinar y clasificar una serie de
elementos (pacientes, radiografas, etc)
8WLOLGDGHV

La evaluacin de la reproducibilidad de las pruebas diagnsticas o la concordancia entre

observadores puede aplicarse en las siguientes situaciones:
1 Concordancia entre observadores. El inters de la investigacin es valorar lo
reproducible que es una prueba, es decir la capacidad que tiene para obtener el mismo
valor cuando la medicin se realiza en la misma muestra en ms de una ocasin en
condiciones similares.
2. Concordancia intra-observador. Compara un observador consigo mismo; la misma
persona realiza la misma medicin dos veces; por ejemplo a un radilogo se le entrega
dos o ms veces la misma serie de radiografas para quelas clasifique. En ocasiones, a
la hora de valorar una prueba diagnstica, no existe un patrn oro de referencia , por lo
que dos mtodos o pruebas pueden ser comparados sinque uno sea considerado superior
a otro.
El anlisis de la reproducibilidad de una prueba diagnstica es un paso previo al estudio
de validez. Si no hay reproducibilidad, la validez estar comprometida, ya que se
valorar con mayor dificultad.
0HWRGRORJtDSDVRVDVHJXLU

(MHPSOR: Para ilustrar el mtodo vamos a tener en cuenta el siguiente escenario: Dos
clnicos diferentes establecen, de forma independiente, el diagnstico de tuberculosis en
una muestra de 10 pacientes. El diagnstico lo llevan a cabo mediante el estudio de las
mismas 10 radiografa de trax de los pacientes. El diagnstico establecido se encuentra
recogido en la tabla 1. Con esta informacin pretendemos analizar el grado de
concordancia o coincidencia entre los dos clnicos en el diagnstico de tuberculosis.

7DEOD'LDJQyVWLFRGHWXEHUFXORVLVUHVXOWDGRV
3$&,(17(

1
2
3
4
5
6
7
8
9
10

2%6(59$'25

POSITIVO
POSITIVO
POSITIVO
POSITIVO
NEGATIVO
NEGATIVO
NEGATIVO
NEGATIVO
NEGATIVO
NEGATIVO

2%6(59$'25

POSITIVO
POSITIVO
POSITIVO
NEGATIVO
POSITIVO
POSTIVO
NEGATIVO
NEGATIVO
NEGATIVO
NEGATIVO

(SLGHPLRORJtD&OtQLFD2Q/LQH

3URI/XLV)9DOHUR-XDQ

BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

La OHFWXUDHLQWHUSUHWDFLyQGHORVUHVXOWDGRV se recogen en la tabla 2.

7DEOD3RVLEOHVFRPELQDFLRQHVGLDJQyVWLFDV\VXLQWHUSUHWDFLyQ
&RPELQDFLRQHV

2EVHUYDGRU

2EVHUYDGRU

/HFWXUD

1SDUHV

a
b
c
d

+
+
-

+
+
-

Concordantes
Discordantes
Discordantes
Concordantes

3
1
2
4

Observe en ella las siguientes situaciones:

1. Encontramos 4 posibles parejas de resultados (a, b, c, d).
2. Cada una de las parejas estn formadas por el diagnstico establecido por los
dos observadores.
Por ejemplo, en las parejas del grupo a, la combinacin es (+,+), es decir,
ambos observadores han dictaminado que el paciente tiene tuberculosis. En el
caso de las parejas del tipo b, la combinacin es (+,-), es decir, el observador 1
diagnostica una tuberculosis, mientras que el observador 2, no la diagnostica.
3. Los pares con igual diagnstico se denominan concordantes. Los pares con
diferente diagnstico se denominan discordantes.
4. En el anlisis vamos a tener en cuenta el nmero de pares de cada una de las
combinaciones. Nos interesa principalmente la informacin proporcionada por
los pares concordantes.
5. Si la concordancia entre los observadores es perfecta, slo existirn pares
concordantes (a y d). En el ejemplo existe un 70% de concordancia o acuerdo (7
pares concordantes/10 pacientes).
Lo primero que tenemos que hacer es WDEXODU ORV GDWRV. Elaborar una tabla de
contingencia de 2x2, en la que se recogen los resultados del observador 1, en las filas, y
del observador 2, en las columnas. En las casillas internas se colocan el nmero de pares
con cada uno de los posibles resultados.
7DEOD'LDJQyVWLFRGHWXEHUFXORVLV

Diagnstico de tuberculosis
2EVHUYDGRU

Positivo
Negativo
7RWDO

2EVHUYDGRU

Positivo Negativo 7RWDO

(a) 3
(b) 1
4
(c) 2
(d) 4
6
5
5
10

En el DQiOLVLV podemos valorar dos parmetros:

1. QGLFH GH FRQFRUGDQFLD (concordancia simple). Nos indica en que medida los
observadores coinciden en la clasificacin de los pacientes. Se expresa como el
porcentaje de acuerdo entre los observadores. En el ejemplo, el ndice de concordancia,

(SLGHPLRORJtD&OtQLFD2Q/LQH

3URI/XLV)9DOHUR-XDQ

BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

o porcentaje de acuerdo, es del 70%. Ambos observadores coinciden en 3 + 4 ocasiones

de 10 posibles [(7/10)*100].
Es un ndice fcil e intuitivo que nos da una primera aproximacin de la concordancia
entre observadores. No obstante, tiene el inconveniente de no considerar (neutralizar) la
influencia del azar. Suponga el caso extremo siguiente: a dos personas sin ninguna
formacin clnica se les encarga que clasifiquen a los pacientes en enfermos
(tuberculosis) o sanos; en esta situacin, debido al azar, y no al criterio clnico, el
diagnstico coincidir en un nmero determinado de sujetos,
2. QGLFH.DSSD de concordancia. El ndice de Kappa expresa el grado de acuerdo, una
vez eliminada la parte atribuida al azar. El mtodo elimina la concordancia debida
exclusivamente al azar.
Para su clculo necesitamos conocer:
a) proporcin de acuerdo observado.
b) proporcin de acuerdo debido al azar.
c) proporcin de acuerdo no explicada por el azar.
d) proporcin mxima de acuerdo no explicada por el azar que podemos alcanzar
D 3URSRUFLyQ GH DFXHUGR REVHUYDGR 3R Los datos absolutos de la tabla inicial la
transformamos en una tabla de probabilidades o proporciones (tabla 4). Cmo?:
dividiendo los efectivos de cada una de las casillas por el total de pacientes que se han
observado. Por ejemplo, los efectivos de la casilla a = 3 los transformamos en
probabilidades 0,3 = 3/10

7DEOD3URSRUFLyQREVHUYDGDGHFRLQFLGHQFLD

Diagnstico de tuberculosis
2EVHUYDGRU

Positivo
Negativo
7RWDO

2EVHUYDGRU

Positivo Negativo 7RWDO

(a) 
(b) 0,1
0,4
(c) 0,2
(d) 
0,6
0,5
0,5
1,0

La proporcin de acuerdo observada (Po) es la suma de las proporciones de los

resultados coincidentes (a+d). En el ejemplo la proporcin observada es 0,3 + 0,4, es
decir existe concordancia en el 0,7 (70%) de los casos.

E 3URSRUFLyQ GH DFXHUGR HVSHUDGR SRU HO D]DU 3H En la tabla de datos, calcular las
probabilidades, o proporciones, esperadas para cada uno de los resultados concordantes
(tabla 5). Cmo?: multiplicando las probabilidades de dar un resultado (positivo o
negativo) de ambos observadores; por ejemplo, la proporcin de acuerdo de la casilla
a sera el producto de la probabilidad de diagnosticar una tuberculosis el observador 1
(0,4) por la del observador 2 (0,5); es decir, la proporcin esperada por efecto del azar
de a es de 0,2 (20%).

(SLGHPLRORJtD&OtQLFD2Q/LQH

3URI/XLV)9DOHUR-XDQ

BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

7DEOD3URSRUFLyQHVSHUDGDGHFRLQFLGHQFLDD]DU
2EVHUYDGRU

Diagnstico de tuberculosis
2EVHUYDGRU

Positivo
Negativo
7RWDO

Positivo
Negativo
7RWDO
(a) 0,4 x 0,5 = 
0,4
(d) 0,6 x 0,5 =  0,6
0,5
0,5
1,0

La proporcin de acuerdo esperada por el azar (Pe) es la suma de las proporciones de

los resultados coincidentes (a+d). En el ejemplo, la proporcin esperada es 0,2 + 0,3, es
decir existe concordancia global debida al azar del 0,5 (50%) de los casos.

F3URSRUFLyQGHDFXHUGRQRH[SOLFDGDSRUHOD]DU. Se obtiene de restar a la proporcin

observada (Po) la esperada por efecto del azar (Pe). En el ejemplo: Po Pe = 0,70 - 0,50
= 0,20. La concordancia no explicada por el azar fue del 20%.

Interpretacin:
- Si el valor es 0 indica que la concordancia observada es debida totalmente al azar.
- Si el valor es diferente de cero, indica que el grado de acuerdo es mayor que el que
cabra esperar si solo estuviera influyendo el azar.
G 0i[LPD FRQFRUGDQFLD SRVLEOH QR H[SOLFDGD SRU HO D]DU. Si la concordancia es
perfecta, la probabilidad observada de acuerdo es de 1 (100%), la ms alta que se puede
encontrar. Si a la mxima concordancia observada le descontamos la esperada por el
azar, obtenemos la mxima concordancia posible no explicada por el azar (sin
intervencin del azar). En el ejemplo, es de 0,50 (1-0,50).

El QGLFH.DSSD, es el cociente entre la proporcin de acuerdo no explicada por el

azar y la mxima concordancia posible sin influencia del azar.

.DSSD

>3R3H3H@





En el ejemplo: [(0,70 - 0,50)/(1-0,50)] = [0,20/0,50] = 0,4 (40%)

(SLGHPLRORJtD&OtQLFD2Q/LQH

3URI/XLV)9DOHUR-XDQ

BBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBBB

El valor mximo del ndice Kappa es 1, se da cuando existe la mxima coincidencia

posible, pero TXpYDORUHVGH.DSSDVHSXHGHQFRQVLGHUDULQGLFDGRUHVGH
EXHQDFRQFRUGDQFLD". En general se suele aceptar:
- Leve: valores entre 0-20
- Baja: valores de 0,21-0,40.
- Moderada (aceptable): valores 0,41-0,60.
- Bueno: valores entre 0,61-0,80
- Excelente: valores entre 0,81-1

En el ejemplo, el grado de concordancia (0,40) es BAJO

&DUDFWHUtVWLFDVGHOQGLFH.DSSD

Una de las principales limitaciones del I Kappa es la influencia que tiene sobre el la
prevalencia de la enfermedad o el efecto estudiado. Esta influencia dificulta la
generalizacin de los resultados obtenidos en la comparaciones en situaciones con
prevalencia de la enfermedad diferentes.
%LEOLRJUDItD

Cepeda Moreno MS, Prez Medina A. Estudios de Concordancia: Intercambiabilidad en

sistemas de medicin. En: lvaro Ruiz y Luis E Morillo, eds. Epidemiologa Clnica.
Investigacin clnica aplicada. Colombia: Panamericana;2004.
Martnez-Gonzlez MA, ed. Bioestadstica amigable. 2ed. Espaa: Diaz de Santos;
2006.
Sackett, Haynes, Guyatt, Tugwell, eds. Epidemiologa clnica. Ciencia bsica para la
medicina clnica. 2 ed. Argentina: Panamericana; 1994.