Anar al contingut

Propietat de Màrkov

De L'Enciclopèdia, la wikipedia en valencià
Trayectòria d'una sola mostra d'un moviment browniano tridimensional (procés de Wiener) Wt, generat per Wolfram Mathematica en un pas de temps de tamany 0,0001, per a temps 0 ≤ t ≤ 2.

En teoria de probabilitat i estadística, la propietat de Markov es referix a la propietat de certs processos estocàstics per la qual "carixen de memòria", lo que significa que la distribució de probabilitat del valor futur d'una variable aleatòria depén únicament del seu valor present, sent independent de l'història de dita variable.[1] Als processos que satisfan esta condició se'ls coneix com processos de Màrkov[2] Deu el seu nom al matemàtic rus Andréi Màrkov, qui va desenrollar la teoria de les cadenes de Màrkov.[3]

Demostració matemàtica

Una cadena de Màrkov es pot caracterisar per la probabilitat d'anar a l'estat n+1 condicionada a que abans estàvem en l'estat n:

P(Xn+1|Xn)

Que és la probabilitat de transició del procés. La propietat de les cadenes de Màrkov és que les transicions entre els estats, solament pot produir-se entre estats veïns. Solament es pot aplegar a l'estat i des de l'estat i-1 o be de i+1.

Este tipo d'estadística se sol trobar en la distribució exponencial, que la seua funció de densitat de probabilitat s'expressa aixina:

fτ(t)=λe−λtt>0

Anem a comprovar que un procés definit per esta funció de densitat de probabilitat no té memòria. La probabilitat de que hi haja una transició entre 0 i un temps t qualsevol és:

P(0<τ<t)=P(τ<t)=∫0tλe−λτdτ

Integrant obtenim:

P(τ <t)=e−λ⋅0−e−λt=1−e−λt

Ara anem a calcular la probabilitat per al mateix interval t, pero en instant d'inici diferent t0. Calcularem la probabilitat de tindre una transició en l'interval t, (de t0 fins a t0+t) condicionat a que abans de t0 no hi ha hagut cap transició:

P(t0<τ<t0+t|τ>t0)=p(t0<τ<t0+t)p(τ>t0)

Substituint per les fdp i operant obtenim:

P(t0<τ<t0+t|τ>t0)=∫t0t0+tλe−λτdτ∫t0∞λe−λτdτ=e−λt0−e−λ(t0+t)e−λt0−e−λ⋅∞=e−λt0(1−e−λt)e−λt0−0=1−e−λt

En lo que queda demostrat que la probabilitat de tindre una transició en un estat, no depén del temps anterior.

Referències

  1. ↑ Outerelo Domínguez, Enrique; Margalef Roig, Juan; Miret Artés, Salvador (2014). Provabilitat i economia 3, Editorial Sanz i Torres, S.L, pp. 38. ISBN 9788415550716.
  2. ↑ Norris, James R. (1998). Markov chains, Cambridge University Press.
  3. ↑ Basharin, Gely P.(2004).«The Life and Work of A. A. Markov».Linear Algebra and its Applications.386: 3-26.Consultat el 31 de març de 2010.(en anglés)