Funcion Generadora de Momentos

17
173 8 | FUNCIÓN GENERATRIZ DE MOMENTOS Y FUNCIÓN CARACTERÍSTICA Algunas de las herramientas más importantes en teoría de probabilidad son tomadas de otras ramas de las matemáticas. En este capítulo discutiremos dos de tales herramientas cercanamente relacionadas. Comenzamos con las funciones generatrices de momentos y luego trataremos a las funciones características. Las últimas son un poco más difíciles de entender en un nivel elemental debido a que requieren del uso de números complejos. Sin embargo, vale la pena vencer este obstáculo, pues el conocimiento de las propiedades de las funciones características nos permite probar la Ley Débil de los Números Grandes y el Teorema Central del Límite (Sección 8.4). 8.1 Funciones Generatrices de Momentos La función generatriz de momentos (f.g.m.) M X (t) de una v.a. X se define por M X (t) = E(e tX ). El dominio de M X son todos los números reales t, tales que E(e tX ) existe (es decir, tal que e tX tiene esperanza finita). Ejemplo 1. Si X está distribuida en forma normal con media µ y varianza σ 2 . Entonces ( ) 2 2 tX tx -[(x- ) /2 ] X - 1 M (t) = E t = e e dx 2 µ σ σ π = σ µ + π σ - ] /2 [y - ) t(y dy e 2 1 e 2 2 = σ µ π σ - ] /2 [y - ty t dy e 2 1 e 2 2 . Ahora, 2 2 2 22 2 2 y (y - t) t ty - - . 2 2 2 σ σ = + σ σ Consecuentemente 22 1 t t 2 X M (t) = e , si - t . µ+ σ < <∞ (1) Ejemplo 2. Si X tiene la densidad gama con parámetros α y λ. Entonces tx -1 -x X 0 M (t) = e x e dx () α α λ λ Γα -1 -( t)x 0 = x e dx () α α λ− λ Γα () = , para - t . ( )( -t) α α λ Γα < Γα λ

Transcript of Funcion Generadora de Momentos

Page 1: Funcion Generadora de Momentos

173

8 | FUNCIÓN GENERATRIZ DE MOMENTOS Y FUNCIÓN CARACTERÍSTICA Algunas de las herramientas más importantes en teoría de probabilidad son tomadas de otras ramas de las matemáticas. En este capítulo discutiremos dos de tales herramientas cercanamente relacionadas. Comenzamos con las funciones generatrices de momentos y luego trataremos a las funciones características. Las últimas son un poco más difíciles de entender en un nivel elemental debido a que requieren del uso de números complejos. Sin embargo, vale la pena vencer este obstáculo, pues el conocimiento de las propiedades de las funciones características nos permite probar la Ley Débil de los Números Grandes y el Teorema Central del Límite (Sección 8.4). 8.1 Funciones Generatrices de Momentos La función generatriz de momentos (f.g.m.) MX(t) de una v.a. X se define por MX(t) = E(e tX). El dominio de MX son todos los números reales t, tales que E(e tX) existe (es decir, tal que etX tiene esperanza finita). Ejemplo 1. Si X está distribuida en forma normal con media µ y varianza σ2.

Entonces

( ) 2 2 tX tx -[(x- ) /2 ]X -

1M (t) = E t = e e dx2

∞ µ σ

∞ σ π∫

= ∫∞

σµ+

πσ

-

]/2[y-)t(y dye2

1e22

= ∫∞

σµ

πσ

-

]/2[y -tyt dye2

1e22

.

Ahora, 2 2 2 2 2

2 2y (y - t) tty - - .

2 2 2σ σ

= +σ σ

Consecuentemente

2 21t t

2XM (t) = e , si - t .

µ + σ∞ < < ∞ (1)

Ejemplo 2. Si X tiene la densidad gama con parámetros α y λ. Entonces

tx -1 - x

X 0M (t) = e x e dx

( )

α∞ α λλΓ α∫

-1 -( t )x

0= x e dx

( )

α ∞ α λ−λΓ α ∫

( )= , para - t .( ) ( -t)

α

α

λ Γ α∞ < < λ

Γ α λ

Page 2: Funcion Generadora de Momentos

174

Por otro lado, la integral diverge para λ ≤ t < ∞. Así,

XM (t) = , para - t .-t

αλ⎛ ⎞ ∞ < < λ⎜ ⎟λ⎝ ⎠

(2)

Ahora, supóngase que X es una v.a. discreta, cuyos posibles valores son enteros no negativos. Entonces

ntX

n 0M (t) = e P(X n).

=

=∑

En el Capítulo 3, definimos la función generatriz de probabilidad para tales v.a.'s como

( )X nX

n 0(t) = E t = t P(X n).

=

Φ =∑

De estas dos fórmulas es claro que

MX(t) = ΦX(et) (3) La fórmula (3) nos permite determinar la f.g.m. directamente de la función generatriz de probabilidades. Por ejemplo, si X tiene una distribución binomial con parámetros n y p, entonces, como se mostró en el Ejemplo 16 del Capítulo 3, ΦX(t) = (pt + 1 - p)n. De donde, se sigue inmediatamente que MX(t) = (pet + 1 - p)n

Similarmente, si X tiene una distribución Poisson con parámetro λ, entonces, de acuerdo con el Ejemplo 18 del Capítulo 3, ΦX(t) = 1)-(teλ . Consecuentemente

MX(t) = .e 1)-(etλ

Por supuesto, en estos dos ejemplos MX(t) puede obtenerse fácilmente en forma directa de la definición de f.g.m.. Si X e Y son v.a.'s independientes, entonces etX y etY también son independientes. En consecuencia

MX+Y(t) = E[et(X + Y)] = E(etXetY) = E(etX)⋅E(etY) = MX(t)⋅MX(t).

Se sigue fácilmente que si X1,…, X n son independientes e idénticamente distribuidas, entonces

( )1 n 1

n

X X XM (t) M (t) .+ + = (4)

Para ver porque MX(t) es llamada f.g.m., escribimos

n n

tXX

n 0

t XM (t) = E(e ) = E .n!

=

⎛ ⎞⎜ ⎟⎝ ⎠∑

Suponiendo que MX(t) es finita sobre -t0 < t < t0, para algún número positivo t0. En este caso uno puede mostrar que en la última expresión para MX(t) se permite intercambiar el orden de la esperanza y la sumatoria. En otras palabras

Page 3: Funcion Generadora de Momentos

175

n

nX 0 0

n 0

E(X )M (t) = t , para -t t t .n!

=

< <∑ (5)

En particular, si MX(t) es finita para toda t, entonces (5) se cumple para toda t. La serie de Taylor (alrededor de 0) para MX(t) es

n n

X X t 0nn 0

t dM (t) = M (t)| .n! dt

==

⎛ ⎞⎜ ⎟⎝ ⎠

∑ (6)

Ahora, comparando los coeficientes de tn en (5) y (6), vemos que

n

nX t 0n

dE(X ) = M (t)| .dt = (7)

Ejemplo 3. Sea X una v.a. distribuida en forma normal con media 0 y varianza σ2.

Use la f.g.m. para encontrar los momentos de X. En principio, observe de (1) que

MX(t) = 2n

0nn

2n

0n

n222t

tn!2

n!1

2t e

22

∑∑∞

=

=

σ σ=⎟⎟

⎞⎜⎜⎝

⎛ σ= .

Así, todos los momentos de orden impar para X son cero, y los momentos de orden par están dados por

2nn

2nn

2n2n

n! 2(2n)!)E(X bien o ,

n!2

(2n)!)E(X

σ=σ

= .

Lo cual concuerda con el resultado obtenido en el Capítulo 7.

Este ejemplo puede usarse para ilustrar (7). Puesto que, 2 2 2 2t t

22 2d e = te ,dt

σ σ

σ y

2t

2422t

2

2 2222

e )t(edtd σσ

σ+σ= , se sigue que, 2 2 2 2t t2

22 22

t 0 t 0

d de = 0, y e = ,dt dt

σ σ

= =

σ los cuales,

son exactamente los dos primeros momentos de X. 8.2 Funciones Características La función característica (f.c.) de una v.a. X está definida como: ϕX(t) = E(eitX), para -∞ < t < ∞, donde i = 1- . Las funciones características son ligeramente más complicadas que las funciones generatrices de momentos debido a que involucran números complejos. Sin embargo, ellas tienen dos importantes ventajas sobre las funciones generatrices de momentos. Primera, son finitas para cualquier v.a. X y todo número real t. Segunda, la f.d. de la v.a. X, y generalmente la f.d.p., si ésta existe, puede obtenerse de la función característica por medio de una "fórmula de inversión".

Page 4: Funcion Generadora de Momentos

176

Usando las propiedades de las funciones características podremos probar la Ley Débil de los Números Grandes y el Teorema Central del Límite, lo cual no podríamos hacer con la f.g.m. Antes de discutir las funciones características, primero resumiremos brevemente algunos hechos que serán requeridos y que involucran variables complejas.

Cualquier número complejo puede ser escrito como z = x + i⋅y, donde x e y son números reales. La magnitud o norma, |z|, de un número complejo, está definida por |z| = (x2 + y2)1/2. La distancia entre dos números complejos z1 y z2 está definida como |z1 − z2|. Si una función de variable real tiene una expansión en serie de potencias con radio de convergencia positivo, podemos usar esta serie de potencias para definir una

correspondiente función de variable compleja. Así, definimos: ez = ∑∞

=0n

n

n!z , para cualquier

número complejo z. La relación: 1 2 1 2z z z ze e e ,+ = ⋅ es válida para cualesquiera números complejos z1 y z2. Tomando z = i⋅t, donde t es un número real, vemos que

n 2 3 4 5

it

n 0

(it) t it t ite = = (1 it - - - )n! 2 3! 4! 5!

=

+ + + ⋅ ⋅⋅∑

2 4 3 5t t t t= (1 - - ) i(t - + - ).2 4! 3! 5!

+ ⋅ ⋅⋅ + ⋅ ⋅⋅

Puesto que, las dos series de potencias en la última expresión corresponden a las del Cos(t) y Sen(t), se sigue que

eit = Cos(t) + i⋅Sen(t). (8) Usando el hecho de que Cos(-t) = Cos(t) y Sen(-t) = - Sen(t), vemos que

e-it = Cos(t) - i⋅Sen(t). De las fórmulas anteriores podemos resolver para Cos(t) y Sen(t), obteniéndose:

it - it it - ite e e eCos(t) = , y Sen(t) = .

2 2i+ − (9)

De (8) se sigue que | eit| = [Cos2(t) + Sen2(t)]1/2 = 1.

Si f(t) y g(t) son funciones de valor real en t, entonces h(t) = f(t) + i⋅g(t) define una función de valor complejo en t. Podemos diferenciar h(t), diferenciando f(t) y g(t) de forma separada; esto es: h'(t) = f'(t) + i⋅g'(t), siempre que f'(t) y g'(t) existan. De forma semejante definimos:

b b b

a a ah(t) dt f(t) dt i g(t) dt,= + ⋅∫ ∫ ∫ siempre que las integrales que

contienen a f y g, existan. La fórmula: ct ctd e c e ,dt

= ⋅ es válida para cualquier constante

Page 5: Funcion Generadora de Momentos

177

compleja c. El teorema fundamental del cálculo sigue siendo válido y, en particular, si c

es una constante compleja diferente de cero, entonces: cb ca b ct

a

e -ee dt .c

=∫

Una v.a. de valor complejo Z puede escribirse en la forma Z = X + i⋅Y, donde X e Y son v.a.'s de valor real. Su esperanza E(Z) está definida como:

E(Z) = E(X + i⋅Y) = E(X) + i⋅E(Y), siempre que, E(X) y E(Y) estén bien definidas. Exactamente como las v.a.'s de valor real, Z tiene esperanza finita si y sólo si E(|Z|) < ∞, en cuyo caso: |E(Z)| ≤ E(|Z|). La fórmula:

E(a1Z1 + a2Z2) = a1⋅E(Z1) + a2⋅E(Z2), es válida siempre que a1 y a2 sean constantes complejas y, Z1 y Z2 sean v.a.'s complejas con esperanzas finitas. Supondremos que X e Y con o sin subíndices, continúan denotando v.a.'s de valor real. Así, en la frase "sea X una v.a. . . .", se entiende que es una v.a. de valor real. Ahora, supóngase que X es una v.a. y t es una constante (se reserva el símbolo t para denotar una constante real). Entonces, |eitX| = 1, así que eitX tiene esperanza finita y X tiene función característica dada por: ϕX(t) = E(eitX), si - ∞ < t < ∞, la cual está bien definida. Vemos que: ϕX(0) = E(e0) = E(1) = 1 y, si - ∞ < t < ∞, |ϕX(t)| = |E(eitX)| ≤ E(|eitX|) = E(1) = 1. La razón por la que la función característica es finita para toda t, mientras que la f.g.m. no lo es, en general, se debe a que eit, para - ∞ < t < ∞ es acotada, en tanto que et, para - ∞ < t < ∞ no lo es. Ejemplo 4. Si X es una v.a. que toma el valor a con probabilidad 1. Entonces

ϕX(t) = E(eitX) = eita, para - ∞ < t < ∞.

En particular, si X toma el valor cero con probabilidad 1, entonces su función característica es idénticamente igual a 1. Si X es una v.a., y las constantes a y b son números reales, entonces ϕa+bX(t) = E[eit(a+bX)] = eita⋅E(eibtX), de donde,

ϕa+bX(t) = eita⋅ϕX(bt), para -∞ < t < ∞. (10) Ejemplo 5. Sea U ~ U(-1, 1). Entonces, para t ≠ 0, se tiene

1itu it -it 1 itu

U -1-1

1 1 e 1 e -e sen(t)(t) = e du .2 2 it 2 it t

⎛ ⎞ϕ ⋅ = = =⎜ ⎟

⎝ ⎠∫

Si a b b-aX = U,2 2+

+ para a < b. Entonces X ~ U(a, b) y por (10), para t ≠ 0, se

tiene que

Page 6: Funcion Generadora de Momentos

178

it(a b)/2X

sen[(b a)t / 2](t) = e .(b a)t / 2

+ −ϕ ⋅

Alternativamente

b itx

X a

1(t) = e dx.b-a

ϕ ⋅∫

Es fácil comprobar por medio de (9) que estas dos respuestas coinciden. Ejemplo 6. Si X tiene una distribución exponencial con parámetro λ. Entonces

0 itx - x -( -it)x -( -it)x

X 0 0(t) = e e dx e dx e .

-it∞ ∞λ λ λ

λϕ λ = λ =

λ∫ ∫

Puesto que, ( ) ( )- x - x itx

x xlim e = lim e e = 0,λ λ

→∞ →∞ entonces,

X(t) = .-itλ

ϕλ

Supóngase que X e Y son v.a.'s independientes. Entonces eitX y eitY son también v.a.'s independientes; en consecuencia

ϕX+Y(t) = E[eit(X + Y)] = E(eitXeitY) = E(eitX)⋅E(eitY), de donde ϕX+Y(t) = ϕX(t) ϕY(t), para -∞ < t < ∞. (11) La fórmula (11) se extiende inmediatamente para producir el hecho de que la función característica de la suma de un número finito de v.a.'s independientes es igual al producto de las funciones características de cada una de las v.a.'s que forman la suma.

Puede mostrarse que ϕX(t) es una función continua respecto a t. Además, si X tiene n-ésimo momento finito entonces, (t)(n)

Xϕ existe, es continua en t, y puede calcularse como

n n

(n) itX itX n itXX n n

d d(t) = E(e ) = E[ e ] = E[(iX) e ].dt dt

ϕ

En particular

(n) n nX (0) = i E(X ).ϕ ⋅ (12)

Podemos intentar expandir ϕX(t) en una serie de potencias de acuerdo a la fórmula

n n n

itX nX

n 0 n 0

(itX) i E(X )(t) = E(e ) = E t .n! n!

∞ ∞

= =

⎛ ⎞ϕ =⎜ ⎟

⎝ ⎠∑ ∑ (13)

Page 7: Funcion Generadora de Momentos

179

Supóngase que, MX(t) = ∑∞

=0n

nn

tn!

)E(X , es finita en -t0 < t < t0, para algún t0. Entonces

(13) también se cumple en -t0 < t < t0. Ejemplo 7. Supóngase que X se distribuye en forma normal con media 0 y varianza

σ2. Encontrar ϕX(t). En el Capítulo 7 se mostró que E(Xn) = 0 para cualquier entero positivo impar n. Además, si n = 2k es un entero par, entonces

E(Xn) = E(X2k) = k!2

(2k)!k

2k

⋅σ .

Por lo que

2 2t2k 2k 2 2 k -2k 2

Xk 0 k 0

i E(X ) (- t /2)(t) = t = = e .(2k)! k!

σ∞ ∞

= =

σϕ ∑ ∑

De forma más general, si X se distribuye normalmente con media µ y varianza σ2. Entonces Y = X - µ se distribuye en forma normal con media 0 y varianza σ2. Puesto que X = µ + Y vemos de la Fórmula (10) y el Ejemplo 7 que

2 2t-it 2

X(t) = e e , si - t .σ

µϕ ∞ < < ∞ (14)

Sea X una v.a. cuya f.g.m. MX(t) es finita en -t0 < t < t0 para algún número positivo t0. Puesto que

MX(t) = E(etX) y ϕX(t) = E(eitX), deberíamos esperar que

ϕX(t) = MX(it). (15) En otras palabras, esperaríamos que si reemplazamos t por it en la fórmula para la f.g.m., obtendremos la fórmula correspondiente para la función característica. Realmente este es el caso, pero un entendimiento profundo de las ideas que contiene requiere de un concepto (extensión analítica) sofisticado de la teoría de variable compleja.

Como un ejemplo de (15), si X se distribuye normalmente con media µ y varianza σ2. Entonces, como ya hemos visto

2 2t

t 2XM (t) = e e ,

σµ

y de donde

2 2 2 2(it) t-(it) i t2 2

XM (it) = e e e e ,σ σ

µ µ=

que es ϕX(t) como puede observarse de (14).

Page 8: Funcion Generadora de Momentos

180

8.3 Fórmulas de Inversión y el Teorema de Continuidad Si X es una v.a. de valor entero. Su función característica está dada por

i j tX X

-(t) = e f (j).

ϕ ∑

Una de las propiedades más útiles de ϕX(t) es que puede usarse para calcular fX(k). Específicamente tenemos la "fórmula de inversión"

-ikt

X X -

1f (k) = e (t) dt.2

π

πϕ

π ∫ (16)

Para verificar (16) escribimos el lado derecho de esta fórmula como

-ikt i j t

X --

1 e e f (j) dt.2

∞π

π∞

⎛ ⎞⎜ ⎟π ⎝ ⎠∑∫

Un teorema en teoría de integración justifica el intercambio en el orden de la integral y la sumatoria en le expresión anterior obteniéndose

i(j-k) t

X --

1f (j) e dt.2

∞ π

π∞

⋅π∑ ∫

Para tener completa la demostración de (16) debemos probar que la última expresión es igual a fX(k). Para hacer esto es suficiente mostrar que

⎩⎨⎧

≠=

=π ∫

π

π k.j si 0,k,j si 1,

dte21

-

t k)i(j- (17)

La fórmula (17) es obvia cuando j = k, pues en este caso ei(j - k)t = 1 para toda t. Si j ≠ k, entonces

i(j-k) ti(j-k) -i(j-k) i(j-k) t

-

e1 e -e sen[(j-k) ]-e dt = = = = 0,

2 2 i(j-k) 2 i(j-k) (j-k)

π ππ

π

πππ

π π π π∫

puesto que: sen(mπ) = 0, para todo entero m. Esto completa la demostración de (17) y por lo tanto también de (16). Ejemplo 8. Sean X1, X2, ⋅ ⋅ ⋅, Xn v.a.'s independientes, idénticamente distribuidas y de

valor entero, y sea Sn = X1 + ⋅ ⋅ ⋅ + Xn. Entonces ( ) n XS (t) (t)

1nϕ=ϕ , y

consecuentemente por (16)

( )n 1

n -iktS X -

1f (k) e (t) dt.2

π

π= ϕ

π ∫ (18)

Page 9: Funcion Generadora de Momentos

181

La fórmula (18) es la base para casi todos los métodos en el análisis del comportamiento de

nSf (k) para valores grandes de n, y en particular, la base para la demostración del Teorema Central del Límite "local" tratado en el Capítulo 7. También existe un resultado análogo al de (16) para v.a.'s continuas. Sea X una v.a. cuya función característica ϕX(t) es integrable, esto es, ∫

∞∞<ϕ

- X dt|(t)| . Puede

mostrarse que en este caso X es una v.a. continua que tiene una densidad fX dada por

-ixt

X X -

1f (x) = e (t) dt.2

∞ϕ

π ∫ (19)

Ejemplo 9. Sea X una v.a. normalmente distribuida con media 0 y varianza σ2. Mostraremos directamente que (19) es válida para tal v.a.

Del Ejemplo 7, sabemos que X tiene función característica 2

2- t2

X(t) eσ

ϕ = . Así, por la definición de función característica,

22 2

2xt - - itx 22

-

1e = e e dx.2

σ∞

σ∞ σ π∫

Si reemplazamos t por -t, y σ por 1/σ en la fórmula anterior, tenemos que

2 2 2

2t x- --itx2 2

-e = e e dx,

2

σ∞

σ∞

σπ∫

o equivalentemente,

2 2 2

2t x- --itx2 2

-

1 1 e = e e dx.22

σ∞

σ∞πσ π ∫

Finalmente, si intercambiamos el papel de los símbolos x y t en la última ecuación, obtenemos

2 2 2

2x t- --ixt2 2

-

1 1 e = e e dt,22

σ∞

σ∞πσ π ∫

lo cual concuerda exactamente, en este caso especial, con (19). Ahora supóngase que X denota cualquier v.a. Si Y es una v.a. que es independiente de X y que tiene distribución normal estándar, y si c denota una constante positiva.

Entonces X + cY tiene la función característica: 2 2c t-2

X(t)e .ϕ Puesto que ϕX(t) es

acotada en valor absoluto por 1 y 2 2c t-2e es integrable, se sigue que X + cY tiene una

Page 10: Funcion Generadora de Momentos

182

función característica integrable. En consecuencia, podemos aplicar (19) y X + cY es una v.a. continua cuya densidad está dada por

2 2c t --itx 2

X+cY X -

1f (x) = e (t)e dt.2

∞ϕ

π ∫

Si integramos ambos lados de esta ecuación sobre a ≤ x ≤ b e intercambiamos el orden de integración, concluimos que

2 2c t b --itx 2

X a -

1P(a X + cY b) = e (t)e dt dx2

⎛ ⎞≤ ≤ ϕ⎜ ⎟⎜ ⎟π ⎝ ⎠

∫ ∫

( )2 2c t b --itx 2

X - a

1= e dx (t)e dt 2

∞ϕ

π ∫ ∫

o bien

2 2c t-ibt -iat -2

X -

1 e - eP(a X + cY b) = (t)e dt .2 -it

⎛ ⎞≤ ≤ ϕ⎜ ⎟π ⎝ ⎠

(20)

La importancia de la ecuación (20), es que ésta se cumple para una v.a. X arbitraria.

El lado derecho de (20) depende de X sólo a través de ϕX(t). Usando este hecho y haciendo en (20) que c→0, se puede mostrar que la f.d. de X está determinada por su función característica. Este resultado es conocido como un "teorema de unicidad" y puede expresarse como sigue: Teorema 1. Si dos v.a.'s tienen la misma función característica, ellas tienen la misma

función de distribución. Ejemplo 10. Use el teorema de unicidad para mostrar que la suma de dos v.a.'s

independientes normalmente distribuidas tiene distribución normal.

Sean X e Y v.a.'s independientes con distribución normal η(µ1, σ12) y η(µ2, σ2

2),

respectivamente. Entonces, 2 2

11

t-i t 2X(t) = e e ,

σµϕ ⋅ y

2 22

2

t-i t 2Y (t) =e e .

σµϕ ⋅ Por lo que,

2

2 21 2

1 2

t-( ) i( ) t 2X Y (t) = e e .

σ +σµ +µ+ϕ ⋅

Esto es, la función característica de X + Y es la misma que la función característica de una v.a. que tiene distribución normal con media µ1 + µ2 y varianza σ1

2 + σ22. Por el

teorema de unicidad X + Y debe tener esa distribución normal. La aplicación más importante de la fórmula de inversión dada en (20) es su uso en la derivación del próximo resultado, el cual, básicamente es la demostración de la Ley Débil de los Números Grandes y el Teorema Central del Límite.

Page 11: Funcion Generadora de Momentos

183

Teorema 2. Sean Xn con n ≥ 1 y X v.a.'s tales que

(t) (t)lim XXn nϕ=ϕ

∞→, para -∞ < t < ∞. (21)

Entonces (x)F (x)Flim XXn n

=∞→

, en todo punto x donde FX es continua. (22)

Este teorema afirma que la convergencia de funciones características implica la convergencia de las correspondientes funciones de distribución o, en otras palabras, que las funciones de distribución "dependen en forma continua" sobre sus funciones características. Por esta razón el Teorema 2 comúnmente es conocido como el "Teorema de Continuidad". La demostración de este teorema es complicada, no presentaremos los detalles de la demostración pero indicaremos brevemente algunas de las principales ideas de uno de los métodos de demostración. Primero elegimos una v.a. Y que tenga la distribución normal estándar y sea independiente de cada una de las v.a.'s Xn, para n ≥ 1. Sean a < b y c una constante positiva. Entonces por la fórmula de inversión dada en (20),

2 2

n

-ibt -iat -c t /2n X -

1 e -eP(a X + cY b) = (t)e dt2 -it

⎛ ⎞≤ ≤ ϕ⎜ ⎟π ⎝ ⎠

∫ (23)

y

2 2c t-ibt -iat -2

X -

1 e -eP(a X + cY b) = (t)e dt2 -it

⎛ ⎞≤ ≤ ϕ⎜ ⎟π ⎝ ⎠

∫ (24)

Por la suposición de que (t)(t) XXnϕ→ϕ , cuando n→∞, y un teorema de la teoría de

integración, se sigue que, el lado derecho de (23) converge al lado derecho de (24) cuando n→∞. Lo anterior implica que

∞→n

lim P(a ≤ Xn + cY ≤ b) = P(a ≤ X + cY ≤ b) (25)

Existen aún dos pasos más para concluir la demostración del teorema. Primero, uno debe mostrar (haciendo que a→ -∞ en (25)) que

∞→n

lim P( Xn + cY ≤ b) = P(X + cY ≤ b) (26)

Finalmente, debemos mostrar (haciendo que c→ 0 en (26)) que

∞→n

lim P(Xn ≤ b) = P(X ≤ b),

siempre que P(X = b) = 0. Este último resultado es equivalente a la conclusión del teorema.

Page 12: Funcion Generadora de Momentos

184

8.4 La Ley Débil de los Números Grandes y el Teorema Central del Límite En esta sección usaremos el teorema de continuidad para probar los dos importantes teoremas en teoría de probabilidad expresados en el título de esta sección. Ambos teoremas fueron discutidos sin demostración en capítulos anteriores. Para probar estos teoremas se hace necesario, en principio, estudiar el comportamiento asintótico de la función log(ϕX(t)) para valores de t cercanos a 0. Sea z un número complejo tal que |z - 1| < 1. Se puede definir log(z) por medio de la serie de potencias

log(z) = ⋅⋅⋅−+−31)-(z

21)-(z1)-(z

32

(para |z - 1| ≥ 1 es necesaria otra definición de log(z)). Con esta definición tenemos las propiedades usuales: log(1) = 0, elog(z) = z, |z - 1| < 1, y si h(t) para a < t < b es una función diferenciable de valor complejo tal que |h(t) - 1| < 1, entonces

h(t)

(t)h' (h(t))dtd

=log .

Sea X una v.a. con función característica ϕX(t). Esto es ϕX(t) es continua y ϕX(0) = 1. Así, log(ϕX(t)) está bien definida para valores de t cercanos a cero y log(ϕX(0)) = 0.

Ahora supóngase que X tiene media finita µ. Entonces ϕX(t) es diferenciable y por (12), ϕX'(0) = iµ. De donde

0-t

(0))(-(t))(t

(t))( XX

0t

X

0t

ϕϕ=

ϕ→→

logloglimloglim

µ=ϕϕ

=ϕ= = i(0)(0)'|(t))(

dtd

X

X0tXlog .

Como consecuencia de lo anterior se tiene que

0t

ti-(t))( X

0t=

µϕ→

loglim . (27)

Supóngase que X también tiene varianza σ2 finita. Entonces ϕX(t) es dos veces diferenciable y por (12)

ϕX''(0) = − E(X2) = − (µ2 + σ2). Ahora, podemos aplicar la regla de l'Hôspital para obtener

2t

(t) i-(t)' (t)2t

(t) i-(t)'2t

i(t)(t)'

tti-(t))(log XX

0tX

XX

0t

X

X

0t2X

0t

ϕµϕ=

ϕϕµϕ

=µ−

ϕϕ

=µϕ

→→→→limlimlimlim .

Page 13: Funcion Generadora de Momentos

185

Por una segunda aplicación de la regla de l'Hôspital vemos que

22

)(i)(2

(0)'i-(0)''t

ti-(t))(log 222222XX

2X

0t

µ+σ−µ−=

µ−σ+µ−=

µϕϕ=

µϕ→

lim .

En otras palabras

2t

ti-(t))( 2

2X

0t

σ−=

µϕ→

loglim . (28)

Teorema 3. (Ley Débil de los Números Grandes). Sean X1, X2, ⋅ ⋅ ⋅ v.a.'s independientes e

idénticamente distribuidas con media finita µ y sea Sn = X1 + ⋅ ⋅ ⋅ + Xn. Entonces, para cualquier ε > 0,

0. n

SP n

n=⎟⎟

⎞⎜⎜⎝

⎛ε>µ−

∞→lim (29)

Demostración: La función característica de µ−+⋅⋅⋅+

=µ−n

X Xn

S n1n es 1

-iµt nXe ( (t/n))ϕ .

Supóngase que t esta fija. Entonces para n suficientemente grande, t/n está suficientemente cercana a cero de tal forma que (t/n))(

1Xϕlog está bien definida y

{ }µ ⎡ ⎤ϕ = ϕ µ⎣ ⎦1 1

-i t nX Xe ( (t/n)) exp n log( (t/n))-i (t/n) . (30)

Enseguida afirmamos que

1Xn

lim n log( (t/n)) i (t/n) 0→ ∞

⎡ ⎤⋅ ϕ − µ =⎣ ⎦ . (31)

La Ecuación (31) es obvia para t = 0, puesto que, 1Xlog( (0)) log(1) 0.ϕ = = Si t ≠ 0

podemos escribir el lado izquierdo de (31) como

Xn

log( (t/n)) - i (t/n)t lim .t/n→∞

ϕ µ⋅

Ya que t/n → 0 cuando n → ∞, por (27) el último límite es 0. Esto completa la demostración de (31). Siguiéndose de (30) y (31) que la función característica de

µ−n

Sn , se aproxima a 1, cuando n → ∞. Ahora, la función constante 1 es la función

característica de una v.a. X tal que P(X = 0) = 1. Así, la f.d. de X está dada por

FX(x) = ⎩⎨⎧

≥<

0. xsi 1,0, xsi 0,

Esta f.d. es continua casi dondequiera excepto en x = 0. Eligiendo ε > 0, por el teorema de continuidad,

Page 14: Funcion Generadora de Momentos

186

0) (-F -n

SP Xn

n=ε=⎟

⎠⎞

⎜⎝⎛ ε≤µ−

∞→lim (32)

y 1)(F n

SP Xn

n=ε=⎟

⎠⎞

⎜⎝⎛ ε≤µ−

∞→lim , lo cual lleva a 0,

nSP n

n=⎟

⎠⎞

⎜⎝⎛ ε>µ−

∞→lim que junto con

(32) implica que (29) se cumple. En el próximo teorema usamos, Φ(x), para denotar a la función de distribución normal estándar dada por

2 y /2

-

1(x) = e dy, para - x2

x

π−

∞Φ ∞ < < ∞∫ .

Recordando que esta función de distribución es continua en todos los valores de x. Teorema 4. (Teorema Central del Límite). Sean X1, X2, ⋅ ⋅ ⋅ v.a.'s independientes e

idénticamente distribuidas con media finita µ y varianza finita σ2. Entonces

nn

S -nlim P x (x), para - x .n→ ∞

µ⎛ ⎞≤ = Φ ∞ < < ∞⎜ ⎟σ⎝ ⎠

Demostración: Estableciendo .nn-SS n

n σµ

=∗ Entonces para t fijo y n suficientemente grande,

( )

( )nn

1

-in t/ nSS

n-in t/ n

X

(t) e t/ n

e t/ n ,

∗µ σ

µ σ

ϕ = ϕ σ

⎡ ⎤= ϕ σ⎣ ⎦

o bien

( ){ }1nXS

(t) exp n log (t/ n) i (t/ n) .∗⎡ ⎤ϕ = ϕ σ − µ σ⎣ ⎦ (33)

Ahora, afirmamos que

( )1

2

Xn

tlim n log (t/ n) i (t/ n) 2→∞

⎡ ⎤⋅ ϕ σ − µ σ = −⎣ ⎦ . (34)

Si t = 0, entonces ambos lados de (34) son igual a cero y claramente (34) se cumple. Si t ≠ 0 podemos escribir el lado izquierdo de (34) como

2

X

n

2

)n(t/)n(t/i)]n(t/[t 1

σ

σµ−σϕ

σ ∞→

loglim2 ,

que por (28) es igual a

2t

2t 22

2

2

−=⎟⎟⎠

⎞⎜⎜⎝

⎛ σ−

σ.

Por lo que (34) se cumple para todo valor de t. Se sigue, por lo tanto, de (33) y (34) que

Page 15: Funcion Generadora de Momentos

187

∞<<∞=ϕ −

∞→∗ t- para ,e (t) /2t

Sn

2

nlim .

De acuerdo al Ejemplo 7, /2t2

e− , es la función característica de una v.a. X que tiene f.d. normal estándar Φ(x). Así, por el Teorema de Continuidad, se concluye que

,t- para (x),x)P(S nn∞<<∞Φ=≤∗

∞→lim

que es la conclusión deseada.

Ejercicios 1.- Si X está distribuida de forma uniforme sobre (a, b). Encontrar MX(t). 2.- Expresar la función generatriz de momentos para Y = a + bY en términos de MX(t)

(aquí a y b son constantes). 3.- Si X tiene una distribución Poisson con parámetro λ. Use la función generatriz de

momentos para encontrar la media y la varianza de X. 4.- Si X tiene una distribución binomial negativa con parámetros α y p.

(a) Encontrar la función generatriz de momentos de X. (b) Use esta función generatriz de momentos para hallar la media y la varianza de X.

5.- Si X es una v.a. continua con densidad fX(x) = (1/2)e-|x|, para - ∞ < x < ∞. (a) Mostrar que MX(t) = 1/(1 - t2), para -1 < t < 1. (b) Use esta función generatriz de momentos para encontrar una fórmula para E(X2n)

(observe que todos los momentos de orden impar de X son cero). 6.- Si X tiene una distribución binomial con parámetros n y p. (a) Encontrar dMX(t)/dt y d2MX(t)/dt2.

(b) Use (a) y la Fórmula 7 para calcular la media y la varianza de X. 7.- Si X1, . . ., Xn son v.a.'s independientes e idénticamente distribuidas tal que (t)M

1X es finita para toda t. Use la función generatriz de momentos para probar que

E(X1 + ⋅ ⋅ ⋅ + Xn)3 = nE(X12) + 3n(n - 1)E(X1

2)⋅E(X1) + n(n - 1)(n - 2)(E(X1)3.

Ayuda: Encontrar ( ) 0t)t( =n

X3

3

1M

dtd .

8.- Si X es una v.a. tal que MX(t) es finita para toda t. Use el mismo argumento que en la demostración de la desigualdad de Chevyshev para concluir que

P(X ≥ x) ≤ e-txMX(t), para t > 0. De donde se sigue que P(X ≥ x) ≤

0t≥min e-txMX(t),

con la condición de que e-txMX(t), tenga un mínimo en 0 ≤ t < ∞. 9.- Si X tiene una distribución gama con parámetros α y λ. Usar el resultado del

Ejercicio 8 para mostrar que P(X ≥ 2α/λ) ≤ (2/e)α. 10.- Si X tiene una distribución Poisson con parámetro λ. Encontrar ϕX(t). 11.- Si X tiene una distribución geométrica con parámetro p. Encontrar ϕX(t). 12.- Si X1, . . ., Xn son v.a.'s independientes que tienen distribución geométrica con

parámetro p. Encontrar la función característica de X = X1 + . . . + Xn.

Page 16: Funcion Generadora de Momentos

188

13.- Si X1, . . ., Xn son v.a.'s independientes que tienen distribución exponencial con parámetroλ. Encontrar la función característica de X = X1 + . . . + Xn.

14.- Sea X una v.a. discreta cuyos posibles valores son enteros no negativos. ¿Qué relación debemos esperar se cumpla entre la función característica de X y la función generatriz de probabilidades de X (recuerde las Fórmulas (3) y (15))?.

15.- Sea X cualquier v.a.. (a) Mostrar que ϕX(t) = E(cos(tX)) + i⋅E(sen(tX)). (b) Mostrar que ϕ- X(t) = E(cos(tX)) - i⋅E(sen(tX)). (c) Mostrar que ϕ- X(t) = ϕX(-t).

16.- Si X es una v.a. simétrica, esto es, X y −X tienen la misma función de distribución. (a) Mostrar que E(sen(tX)) = 0 y que ϕX(t) es de valor real. (b) Mostrar que ϕX(-t) = ϕX(t).

17.- Sean X e Y v.a.'s independientes e idénticamente distribuidas. Mostrar que ϕX-Y(t) = |ϕX(t)|2. Ayuda: Use el Ejercicio 15.

18.- Sea X una v.a. tal que ϕX(t) es de valor real. (a) Mostrar que X y −X tienen la misma función característica (use el Ejercicio (15). (b) ¿Porqué se sigue de (a) que X y −X tienen la misma función de distribución?

19.- Si X es una v.a. continua que tiene la densidad fX(x) = (1/2)e-|x|, para -∞ < x < ∞. (a) Mostrar que ϕX(t) = 1/(1+t2). (b) Use (a) y la fórmula de inversión dada en (19) para concluir que

e-|x| = ∫∞

∞ +π

- 2ixt- dt

)t(11e .

(c) Mostrar usando (b) que

e-|x| = ∫∞

∞ +π

- 2ixt dt

)t(11e .

20.- Sea X una v.a. que tiene densidad Cauchy

fX(x) = ∞<<∞+π

x- para ,)x(1

12 .

Mostrar que ϕX(t) = e-|t|, para -∞ < t < ∞. Ayuda: Intercambiar el papel de x y t en el Ejercicio 19.

21.- Sean X e Y v.a.'s independientes con densidad Cauchy. (a) Encontrar la función característica de X + Y, y de (X + Y)/2. (b) ¿Porqué se sigue que (X + Y)/2 también tiene densidad Cauchy?

22.- Extender el resultado del Ejercicio 21 para mostrar que si X1, X2, ⋅ ⋅ ⋅, Xn son v.a.'s independientes con densidad Cauchy, entonces (X1 + ⋅ ⋅ ⋅ +Xn)/n también tiene densidad Cauchy.

23.- Para λ > 0, sea Xλ una v.a. que tiene distribución Poisson con parámetro λ. (a) Use un argumento semejante al usado en la prueba del Teorema Central del

Límite para mostrar que si -∞ < t < ∞, /2-tit/)/-it(X 2

e)]it/1(eexp[E(e =λ−−λ= λ

∞→λ

λλ

∞→λ

λ limlim .

(b) ¿Qué conclusión debería seguirse de (a) por una modificación apropiada del Teorema de Continuidad?.

Page 17: Funcion Generadora de Momentos

189