Почему стандартное отклонение выборки является смещенной оценкой

57

Согласно статье в Википедии об объективной оценке стандартного отклонения, образец SD

s=1n1i=1n(xix¯)2

является предвзятой оценкой SD населения. Утверждается, что .E(s2)E(s2)

NB. Случайные величины являются независимыми, и каждая xiN(μ,σ2)

У меня вопрос двоякий:

  • Что является доказательством предвзятости?
  • Как рассчитать ожидание стандартного отклонения выборки

Мои знания по математике / статистике только промежуточные.

Дэв Вепс
источник
4
Ответы на оба вопроса вы найдете в статье в Википедии о распространении Чи .
whuber

Ответы:

57

Ответ @ NRH на этот вопрос дает хорошее простое доказательство предвзятости стандартного отклонения выборки. Здесь я явно вычислю ожидание стандартного отклонения выборки (второй вопрос оригинального плаката) от нормально распределенной выборки, в этот момент смещение очевидно.

Несмещенная выборочная дисперсия из множества точек являетсяx1,...,xn

s2=1n1i=1n(xix¯)2

Если нормально распределены, это факт, чтоxi

(n1)s2σ2χn12

где - истинная дисперсия. Распределение χ 2 k имеет плотность вероятностиσ2χk2

p(x)=(1/2)k/2Γ(k/2)xk/21ex/2

используя это, мы можем получить ожидаемое значение ;s

E(s)=σ2n1E(s2(n1)σ2)=σ2n10x(1/2)(n1)/2Γ((n1)/2)x((n1)/2)1ex/2 dx

s2(n1)σ2χ2χ2

E(s)=σ2n10(1/2)(n1)/2Γ(n12)x(n/2)1ex/2 dx=σ2n1Γ(n/2)Γ(n12)0(1/2)(n1)/2Γ(n/2)x(n/2)1ex/2 dx=σ2n1Γ(n/2)Γ(n12)(1/2)(n1)/2(1/2)n/20(1/2)n/2Γ(n/2)x(n/2)1ex/2 dxχn2 density

χn2

E(s)=σ2n1Γ(n/2)Γ(n12)

s

σE(s)=σ(12n1Γ(n/2)Γ(n12))σ4n
n

nnσ=11/4n

введите описание изображения здесь

макрос
источник
(4n)1
Вы действительно приложили много усилий, чтобы сделать этот макрос. Когда я впервые увидел сообщение примерно минуту назад, я думал о том, чтобы показать предвзятость, используя правило Дженсена, но кто-то уже сделал это.
Майкл Черник
2
конечно, это примерный способ показать, что стандартное отклонение смещено - я в основном отвечал на второй вопрос автора плаката: «Как вычислить ожидание стандартного отклонения?».
Макрос
2
sσk
2
skk
43

s2=1n1i=1n(xix¯)2
σ2
E(s2)<E(s2)=σ
s2σ2
NRH
источник
19

Sn=i=1n(XiX¯n)2n1,
SnVar[Sn]0
0<Var[Sn]=E[Sn2]E2[Sn]E2[Sn]<E[Sn2]E[Sn]<E[Sn2]=σ.
Zen
источник