El Libro Estocastico4
El Libro Estocastico4
El Libro Estocastico4
PROCESOS ESTOCÁSTICOS
Introducción
Douglas Rivas
Rúben Delgadillo.
Universidad de Los Andes
Clases
CHAPTER 1
PROCESOS ESTOCÁSTICOS
Suerte...
—Douglas
A continuación se presentan los objetivos que se quiere el estudiante alcance una vez estu-
diado el tema
1.2 Introducción
En el estudio de las variables aleatorias realizado hasta el momento se han estudiado las
características aleatorias del fenómeno pero suponiendo que las mismas permanecen con-
stantes a través del tiempo o el espacio. Al incluir en el estudio la presencia de la variable
determinística tiempo (espacio) se está considerando que, de alguna forma, la variable
aleatoria depende del tiempo(espacio). En otras palabras, la variable aleatoria dependerá
del fenómeno probabilístico y del tiempo. En consecuencia, cualquier función que se es-
tablezca en términos de la variable aleatoria, como los son la función de distribución o la
función de densidad, serán también dependientes del tiempo.
Uno de los objetivos de este capítulo es construir un modelo que nos permita explicar la
estructura y preveer la evolución, al menos a corto plazo, de una variable que observamos
a lo largo del tiempo. La variable observada puede ser económica (IPC, demanda de un
producto, el inventario de un almacén, entre otras), física (temperatura de un proceso, ve-
locidad del viento en una central eólica, concentración en la atmósfera de un contaminante,
etc...), social (número de nacimientos, votos de un determinado partido, etc...), salud (), ed-
ucación ().
La primera idea básica es identificar un proceso estocástico como una sucesión de vari-
ables aleatorias {Xn , n ∈ N} donde el subindice indica el instante de tiempo (o espacio)
DEFINICIÓN DE PROCESO ESTOCÁSTICO 3
correspondiente.
Esta idea inicial se puede generalizar fácilmente, permitiendo que los instantes de tiempo
en los que se definen las variables aleatorias sean continuos. Así, se podrá hablar de una
colección o familia de variables aleatorias {X(t), t ∈ R}, que da una idea mas exacta de
lo que es un proceso estocástico.
Se tenía que una variable aleatoria X(ω) es una función que va desde un espacio muestral
Ω a la recta real, de manera que a cada punto ω ∈ Ω del espacio muestral se le puede
asociar un número de la recta real. (Por supuesto dicha función debe cumplir con una
condición). De igual manera se define el vector aleatorio. (ver figura 1.1).
W W R2
X X
w R w
x(w)
Figure 1.1
Formalmente,
Definición 1.3 (Proceso estocástico) Un proceso estocástico sobre (Ω, A, P ), es una fun-
ción X : Ω × T → E tal que a la pareja (ω, t) se le asocia un valor en E representado
por X(ω, t)
30
X(w1,t)
25
W
20
w1 X(w2,t)
15
w2
w3
10
5
X(w3,t)
0
0 5 10 15 20
Figure 1.2
EJEMPLO 1.1
Xt
Figure 1.3
DEFINICIÓN DE PROCESO ESTOCÁSTICO 5
Definición 1.4 (Proceso estocástico) Un proceso estocástico sobre (Ω, A, P ) con espacio
de estados E y conjunto de indices T, es una familia de variables aleatorias representada
por {Xt : t ∈ T }.
A los posibles valores que puede tomar la variable aleatoria se le denominan estados, por
lo tanto al conjunto de todos los posibles valores se le denomina espacio de estados. For-
malmente
El espacio de estados puede ser finito o infinito, tal distinción es muy importante porque la
misma da una tipología de los procesos estocásticos.
Al igual que con el espacio de estados, el espacio del parámetro puede ser finito o infinito,
y dicha diferenciación definen una tipología de los procesos estocásticos. En el caso finito,
se acostumbra sustituir t por n.
Notación Es costumbre escribir
EJEMPLO 1.2
EJEMPLO 1.3
Lanzamiento de un dado muchas veces. Xt es la cara del dado que cae en el momento
t.
E = {1, 2, 3, 4, 5, 6}
T = {t : t ∈ (−∞, ∞)}
6 PROCESOS ESTOCÁSTICOS
Hemos visto que si fijamos el valor de t obtenemos una variable aleatoria. Por otro lado,
si fijamos ω ∈ Ω entonces obtenemos una función X(ω) : T → R sobre el conjunto de
parámetros, es decir, a cada evento ω en el espacio Ω le corresponde una función sobre el
conjunto de parámetros T .
Por lo tanto, para cada valor de t en T , el mapeo ω → Xt (ω) es una variable aleatoria,
mientras que para cada ω en Ω fijo, la función t → Xt (ω) es llamada una trayectoria o
realización del proceso (ósea que en vez de un valor se tiene una función de t). Es decir, a
cada ω del espacio muestral le corresponde una trayectoria del proceso (ver figura 1.4. Es
por ello que a veces se define un proceso estocástico como una función aleatoria.
12
10
8
y1
6
4
2
0
0 5 10 15 20
Notación
EJEMPLO 1.4
EJEMPLO 1.5
DEFINICIÓN DE PROCESO ESTOCÁSTICO 7
Se lanza una moneda varias veces. Supóngase que cada vez que sale cara, un jugador
gana 1 unidad y si sale cruz pierde 1 unidad. Se puede definir un proceso estocástico
que modeliza la evolución del juego. Así, si se denomina Xn al número de unidades
monetarias que quedan después de n lanzamientos, el espacio muestral de Xn es
Ω = {n − uplas de c y s }
N (Ω) = 2n
y el sigma-álgebra que se define es A = P(Ω), esto es, las partes de Ω.Si consider-
amos a todas las posibles n − uplas equiprobables entonces P (ω) = 1/2n .
Es un proceso discreto, porque el conjunto paramétrico es T = {1, 2, 3, · · · } y el
posible conjunto d estados es
X3 = {−3, −1, 1, 3}
P (X3 = −3) = 1
23 = 8
1
Resumiendo
De acuerdo con la defunción de procesos estocástico vista anteriormente, existen dos el-
ementos muy importantes que los caracterizan, el espacio del parámetro y el espacio de
estados. Por lo tanto, tenemos distintos procesos de acuerdo a si dichos espacios son dis-
cretos o continuos. Veamos a continuación dicha clasificación
Dicha clasificación no puede verse de manera separada pues un proceso estocástico esta
definido por ambos espacios a la vez, siendo así en la siguiente tabla se muestra dicha
clasificación
```
``` Parámetro
``` Discreto Continuo
Estado ``
Discreto Cadena Proceso Puntual
Continuo secuencia aleatoria Proceso continuo
Es decir,
Por ejemplo, considere una máquina dentro de una fábrica, los posibles estados de
para la máquina son que esté operando o que esté fuera de funcionamiento y la ver-
ificación de esta característica se realizará al principio de cada día de trabajo. Si
hacemos corresponder el estado ”fuera de funcionamiento” con el valor 0 y el estado
”en operación” con el valor 1, se tiene que el espacio de estado es E = {0, 1} y
el espacio del parámetro es T = {1, 2, ..., 20} correspondientes a los días laborales,
la siguiente figura muestra una posible secuencia de cambios de estado a través del
tiempo para esa máquina.
Xt
x3
x2
x1
T
t1 t2 t3 t4 t5 t6 t7
y
∂k
f (x1 , x2 , ..., xk ; t1 , t2 , ..., tk ) = F (x1 , x2 , ..., xk ; t1 , t2 , ..., tk )
∂x1 , ..., xk
EJEMPLO 1.6
Consideremos el lanzamiento de una moneda varias veces. Cada vez que la moneda
cae cara la partícula se mueve una posición hacia atrás, en caso contrario se mueve
una posición hacia adelante. Sea p = P [{sello}]. Sea Xn la posición de la partícula
en el tiempo n = 2. Estamos interesados en hallar la función de masa de probabilidad
de orden j del proceso.
Como n = 2 nos interesa modelar la posición de la partícula una vez que la moneda
ha sido lanzada dos veces. El espacio muestral del experimento aleatorio es
donde {s} es sello y {c} es cara. La variable aleatoria Xn toma los siguientes valores:
Ahora bien,
Por lo tanto,
(1 − p) ,
2
si x = −2;
P [X2 = x] = 2p(1 − p), si x = 0;
2
p , si x = 2.
Así mismo como la media, la varianza y la covarianza nos permiten caracterizar, al menos
parcialmente, variables y vectores aleatorios, también podemos caracterizar un proceso
estocástico con la ayuda de sus momentos.
CovX (t1 , t2 )
ρX (t1 , t2 ) =
[CovX (t1 , t1 )CovX (t2 , t2 )]1/2
Se usa el prefijo auto porque la función es calculada para dos valores del mismo proceso
{Xt , t ∈ T }. La función RX,Y (t1 , t2 ) = E[Xt1 Yt2 ] donde {Yt , t ∈ T ∗} es otro proceso
estocástico, es llamada la Función de Correlación Cruzada. De hecho en nuestro caso
podemos omitir el prefijo.
EJEMPLO 1.7
Sea Y una variable aleatoria que se distribuye U (0, 1). Definamos el proceso estocástico{Xt , t ≥
0} por
Xt = eY t, t ≥ 0
Vamos a calcular la función de densidad de primer proceso, la media y la función de
autocorrelación.
d ln(x/t)
f (x, t) = fXt (x) = fY [ln(x/t)]
dt
1 1 1
= 1 1/t = = , ∀x ∈ (t, te)
x/t x x
La media es
∫ 1 1
E[Xt ] = E[eY t] = tE[eY ] = t ey 1dy = tey
0 0
o de manera equivalente,
∫ te ∫ te te
1
E[Xt ] = x dx = dx = x
t x t t
= te − t = t(e − 1), t ≥ 0
Finalmente,
Xt Xt+s = eY teY (t + s) = e2y t(t + s)
Por lo tanto,
EJEMPLO 1.8
Ensayos independientes para los cuales la probabilidad de éxito es la misma para cada
uno de estos ensayos son llamados ensayos Bernoulli. Por ejemplo, podemos lanzar
un dado independientemente un número indefinido de veces y definir un éxito cuando
cae el ”6”, Un proceso Bernoulli, es una sucesión X1 , X2 , ... de variables aleatorias
PROPIEDADES DE LOS PROCESOS ESTOCÁSTICOS 13
∑
1
E[Xk ] = xk P (xk ) = 0(1 − p) + 1(p) = p
xk =0
∑
1 ∑
1
RX (k1 , k2 ) = E[Xk1 Xk2 ] = xk1 xk2 P [xk1 xk2 ]
xk1 =0 xk2 =0
∑
1 ∑
1
= xk1 xk2 P [xk1 ]P [xk2 ]
xk1 =0 xk2 =0
si k − 1 = k2 = k,
∑
1
RX (k, k) = E[Xk2 ] = x2k P [xk ] = 02 (1 − p) + 1 ∗ p = p
xk =0
Entonces,
{
p2 − p ∗ p = 0, ̸ k2 ;
si k1 =
CovX (k1 , k2 ) =
CovX (k, k) = p − p = p(1 − p), si k1 = k2 = k.
2
Algunos procesos estocásticos presentan propiedades las cual permiten su estudio de man-
era más fácil pues se simplifican los cálculos en los mismos. En este caso vamos a estudiar
tres de las propiedades más importantes: Procesos estacionarios, procesos Markovianos y
procesos con incrementos independientes.
Observaciones:
F (x1 , x2 , ..., xn ; t1 , t2 , ..., tn ) = F (x1 , x2 , ..., xn ; t1 +s, t2 +s, ..., tn +s) ∀s, n, t1 , ..., tn
es decir si ∀n ∈ N, ∀s ∈ T y ∀{t1 , t2 , ..., tn } ∈ T las variables aleatorias (Xt1 , Xt2 , ..., Xtn )
tiene la misma distribución conjunta que (Xt1 +s , Xt2 +s , ..., Xtn +s )
Observaciones:
F (x; t) = F (x; t + s)
Cuando n=2
EJEMPLO 1.9
EJEMPLO 1.10
y1 = Xt2 − Xt1
y2 = Xt3 − Xt2
...
yn−1 = Xtn − Xtn−1
Son independientes.
1.8 Ejercicios