Processo empírico

Em teoria das probabilidades, um processo empírico é um processo estocástico que descreve a proporção de objetos em um sistema em um dado estado. Para um processo em um espaço de estados discreto, uma cadeia de Markov populacional de tempo contínuo ou modelo populacional de Markov é um processo que conta o número de objetos em um dado estado (sem reescalonamento). Na teoria de campo médio, teoremas do limite (conforme o número de objetos se torna grande) são considerados e generalizam o teorema central do limite para medidas empíricas. Aplicações da teoria dos processos empíricos surgem na estatística não paramétrica.

Definição

Para variáveis aleatórias independentes e identicamente distribuídas

$X_1,X_2,\cdots ,X_n$

em

$ℝ$

com função distribuição acumulada comum

$F(x)$

, a função distribuição empírica é definida por:

$F_n(x)=\frac{1}{n}\sum _{i=1}^n{I}_{(-\mathrm{\infty },x]}(X_i),$

em que

$I_C$

é a função indicadora do conjunto

$C$

.

Para todo $x$ fixo, $F_n(x)$ é uma sequência de variáveis aleatórias que converge a $F(x)$ quase certamente pela lei forte dos grandes números, isto é, $F_n$ converge pontualmente a $F$. O matemático ucraniano Valery Glivenko e o matemático italiano Francesco Paolo Cantelli fortaleceram este resultado ao provar a convergência uniforme de $F_n$ a $F$ pelo teorema de Glivenko–Cantelli.

Uma versão centralizada e escalonada da medida empírica é a medida sinalizada:

$G_n(A)=\sqrt{n}(P_n(A)-P(A)).$

Isto induz um mapa sobre as funções mensuráveis

$f$

dado por:

$f\mapsto G_{n}f=\sqrt{n}(P_n-P)f=\sqrt{n}(\frac{1}{n}\sum _{i=1}^{n}f(X_i)-𝔼f).$

Pelo teorema central do limite,

$G_n(A)$

converge em distribuição a uma variável aleatória normal

$N(0,P(A)(1-P(A)))$

para um conjunto mensurável fixo

$A$

. De forma semelhante, para uma função fixa

$f$

,

$G_{n}f$

converge em distribuição a uma variável aleatória normal

$N(0,𝔼(f-𝔼f{)}^2)$

, desde que

$𝔼f$

e

$𝔼f^2$

.

$(G_n(c){)}_{c\in 𝒞}$ é um processo empírico indexado por $𝒞$, uma coleção de subconjuntos mensuráveis de $S$.

$(G_{n}f{)}_{f\in ℱ}$ é um processo empírico indexado por $ℱ$, uma coleção de funções mensuráveis de $S$ a $ℝ$.

Um resultado significante na área dos processos empíricos é o teorema de Donsker. Isto levou a um estudo das classes de Donsker: conjuntos de funções com a útil propriedade de processo empíricos indexados por estas classes que convergem fracamente a um certo processo gaussiano. Ainda que se possa mostrar que classes de Donsker são classes de Glivenko–Cantelli, o contrário não é verdadeiro em geral.

Exemplo

Como um exemplo, considere funções distribuição empírica. Para variáveis aleatórias independentes e identicamente distribuídas de valores reais

$X_1,X_2,\cdots ,X_n$

, elas são dadas por:

$F_n(x)=P_n((-\mathrm{\infty },x])=P_n{I}_{(-\mathrm{\infty },x]}.$

Neste caso, processos empíricos são indexados por uma classe

$𝒞=\{(-\mathrm{\infty },x]:x\in ℝ\}.$

. Mostrou-se que

$𝒞$

é uma classe de Donsker em particular.

$\sqrt{n}(F_n(x)-F(x))$ converge fracamente em ${\ell }^{\mathrm{\infty }}(ℝ)$ a uma ponte browniana $B(F(x))$.