Procesos de Markov
APLICACIONES
Algebra
Lineal
Anbal Baena A.
Facultad de Ingeniera
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Temas
1. Ecuaciones en diferencia y potencias Ak
2. Proceso de Markov
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
ES?
QUE
Muchos problemas de algunas ciencias son
procesos que van pasando a traves de
diferentes estados cada cierto intervalo de
tiempo, se describe usualmente como un
sistema de ecuaciones en diferencias.
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
Teorema
Si A Cnn. Si A diagonaliza como
D = P 1AP , entonces para todo k N se
tiene que Ak = P Dk P 1
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
Ejemplo
La poblacion de una cierta variedad de peces aumenta de
manera que el crecimiento en cualquier a
no, es el doble del
crecimiento en el a
no anterior. Si inicialmente se tenan 50
peces y despues del primer a
no se contabilizaron 70 peces.
1. Encuentre el tama
no de la poblacion de peces en
cualquier a
no.
2. Encuentre el tama
no de la poblacion de peces despues
del quinto a
no.
3. Encuentre el a
no en que la poblacion de peces alcanza
2800 individuos.
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
Solucion
Pn : Cantidad de peces al final del n-esimo a
no.
Crecimiento de la poblacion de peces del n-esimo a
no al
siguiente: Pn+1 Pn
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
Solucion
Pn : Cantidad de peces al final del n-esimo a
no.
Crecimiento de la poblacion de peces del n-esimo a
no al
siguiente: Pn+1 Pn
Crecimiento de la poblacion en el a
no anterior: Pn Pn1
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
Solucion
Pn : Cantidad de peces al final del n-esimo a
no.
Crecimiento de la poblacion de peces del n-esimo a
no al
siguiente: Pn+1 Pn
Crecimiento de la poblacion en el a
no anterior: Pn Pn1
Crecimiento de la poblacion: Pn+1 Pn = 2(Pn Pn1 )
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
Solucion
Pn : Cantidad de peces al final del n-esimo a
no.
Crecimiento de la poblacion de peces del n-esimo a
no al
siguiente: Pn+1 Pn
Crecimiento de la poblacion en el a
no anterior: Pn Pn1
Crecimiento de la poblacion: Pn+1 Pn = 2(Pn Pn1 )
A
nadimos la ecuacion trivial: Pn = Pn
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
Solucion
Pn : Cantidad de peces al final del n-esimo a
no.
Crecimiento de la poblacion de peces del n-esimo a
no al
siguiente: Pn+1 Pn
Crecimiento de la poblacion en el a
no anterior: Pn Pn1
Crecimiento de la poblacion: Pn+1 Pn = 2(Pn Pn1 )
A
nadimos la ecuacion trivial: Pn = Pn
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
Pn+1
un =
, donde un es el vector cuyas
Pn
dos componentes son la poblacion de peces
en el ano n + 1 y en el ano anterior.
El sistema lo podemos representar:
3 2
Pn+1
Pn
=
Pn
1 0
Pn1
| {z } |
{z
}
un
Aun1
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Ecuaciones en diferencia
Teorema
Ejemplo
c1
c2
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Definiciones
Teoremas
Ejemplo
Definicion 1
Sean S1, S2, , Sn estados posibles de un
sistema S. Suponga que S se observa en los
tiempos T1, T2, , Tn. Una Cadena de
Markov es un proceso en el cual la
probabilidad emprica de que S se halle en
un estado particular al tiempo Tk depende
solamente del estado en que se halle S en el
tiempo Tk1 .
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Definiciones
Teoremas
Ejemplo
La matriz de transici
on en un
proceso de Markov es una matriz
de probabilidad.
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Definiciones
Teoremas
Ejemplo
Definicion 2
Sea A una matriz n n. A es una matriz de
probabilidad di se cumple que:
1. aij 0, i, j
2. La suma de las componentes en cada
columna es 1.
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Definiciones
Teoremas
Ejemplo
Teorema 1
Sea Ann una matriz de probabilidad;
entonces = 1 es un valor caracterstico de
A
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Definiciones
Teoremas
Ejemplo
Teorema 2
Sea un proceso de Markov dado por la matriz A y
la cadena X1 , X2 , X3 , Xk , . Si A es
diagonalizable y todo valor caracterstico de
A 6= 1 posee modulo menor que 1 entonces:
1. La sucesion X1 , X2 , X3 , Xk , cuando K
tiende a infinito converge al lm Xk = X
x
Anbal Baena A.
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Definiciones
Teoremas
Ejemplo
Ejemplo 1
1.
Angeles.
Si inicialmente la compa
na tena x0 , y0 , z0
Algebra
Lineal
Ecuaciones en diferencia
Procesos de Markov
Definiciones
Teoremas
Ejemplo
Ejemplo 2
2.
Cada a
no 5 % de la poblacion de la ciudad se muda a
los suburbios y 3 %de la poblacion de los suburbios se
muda a la ciudad. Suponga que inicialmente 60 % de la
poblacion vive en la ciudad y 40 % en los suburbios.
a. Cual es la distribucion de la poblacion despues un
a
no.
b. Cual sera a largo plazo la distribucion
Anbal Baena A.
Algebra
Lineal