Доверительные интервалы против размера выборки?

9

Я абсолютно новичок в статистике и области доверительных интервалов. Так что это может быть очень тривиально или даже звучать глупо. Я был бы признателен, если бы вы могли помочь мне понять или указать мне литературу / текст / блог, который объясняет это лучше.

Я вижу на различных новостных сайтах, таких как CNN, Fox news, Politico и т. Д., Об их опросах, касающихся президентской гонки 2012 года в США. Каждое агентство проводит некоторые опросы и сообщает некоторые статистические данные в форме:

CNN: популярность Обамы составляет X% с погрешностью +/- x1%. Размер выборки 600. FOX: популярность Обамы составляет Y% с погрешностью +/- y1%. Размер выборки 800. XYZ: популярность Обамы составляет Z% с погрешностью +/- z1%. Размер выборки 300.

Вот мои сомнения:

  1. Как мне решить, кому доверять? Должно ли оно основываться на доверительном интервале, или я должен предположить, что, поскольку Fox имеет больший размер выборки, его оценка является более надежной? Существует ли неявная связь между доверительной вероятностью и размером выборки, так что указание одной исключает необходимость указания другой?

  2. Могу ли я определить стандартное отклонение от доверительных интервалов? Если это так, действительно ли оно всегда или действительно только для определенных распределений (например, гауссовых)?

  3. Есть ли способ, которым я могу «объединить» или «объединить» вышеупомянутые три оценки и получить мою собственную оценку вместе с доверительными интервалами? Какой размер выборки я должен заявить в этом случае?

Я упомянул CNN / Fox только для того, чтобы лучше объяснить мой пример. Я не собираюсь начинать дебаты между демократами и республиканцами здесь.

Пожалуйста, помогите мне понять вопросы, которые я поднял.

Nik
источник

Ответы:

4

В дополнение к отличному ответу Петра, вот несколько ответов на ваши конкретные вопросы:

  1. Кому доверять, будет зависеть также от того, кто проводит опрос и какие усилия они прилагают, чтобы получить опрос хорошего качества. Больший размер выборки не лучше, если выборка не является репрезентативной, принимая огромный опрос, но только в одном состоянии без колебаний не даст очень хороших результатов.

    1n

  2. Если вы знаете достаточно о том, как была взята проба и какая формула использовалась для вычисления интервала, вы можете определить стандартное отклонение (вам также необходимо знать уровень достоверности, обычно 0,05). Но формула отличается для стратифицированных и кластерных образцов. Также большинство опросов смотрят в процентах, поэтому будет использовать биномиальное распределение.

  3. Есть способы объединить информацию, но вам, как правило, нужно знать что-то о том, как были собраны образцы, или быть готовым сделать некоторые предположения о том, как были построены интервалы. Байесовский подход является одним из способов.

Грег Сноу
источник
1
+1. Но действительно ли перспективы № 3 такие мрачные или трудные? Если у меня есть набор независимых оценок, каждая из которых имеет свой предел погрешности, почему я не могу (по крайней мере, грубо) объединить их обычным способом (в качестве взвешенного среднего, обратно взвешенного по квадратам МО) и объединить их стандартные ошибки как хорошо (используя формулы дисперсии)? Это не было бы идеально, но это должно быть лучше, чем выбрать один опрос, на который можно положиться, верно?
whuber
Спасибо Грег! Я очень ценю ваши ответы. Вы упомянули в своем ответе на вопрос 3, что «байесовский подход - это один из способов». Не могли бы вы указать мне некоторую литературу, которая дает больше информации об этом?
Ник
@whuber: Спасибо за ваш комментарий. Это то, о чем я думал. Считаете ли вы оправданным объединение этих оценок таким образом? Может быть не полностью, но в значительной степени?
Ник
1
@whuber, я не хотел рисовать это как мрачный, просто чтобы убедиться, что плакат знал и мог жить с необходимыми предположениями.
Грег Сноу,
@Nik, в Интернете есть много учебников по байесовской статистике. Простой подход (который предполагает, что все выборки являются простыми случайными выборками или что план обследования был таким, что допущение SRS не за горами) состоял бы в том, чтобы начать с предварительного бета-тестирования, а затем использовать каждый опрос с биномиальной вероятностью для обновить и получить новый апостериор. Хорошая вещь в байесовском подходе - вы можете сбрасывать со счетов результаты предыдущих исследований, если не хотите, чтобы они оказали такое же влияние, как и последний опрос.
Грег Сноу,
4

Это огромная тема, но в основном есть две проблемы:

1) Точность - это определяется размером выборки. Большие выборки дают более точные оценки с более низкой стандартной ошибкой и более узкими доверительными интервалами

2) Предвзятость - которая в статистике не обязательно имеет отрицательную коннотацию, которую она имеет в другом месте. В опросах они пытаются получить случайную выборку XXXX (иногда вероятные избиратели, иногда зарегистрированные избиратели). Но они этого не делают. Некоторые опросы используют только наземные линии. Различные группы людей с большей или меньшей вероятностью ответят. Разные группы с большей или меньшей вероятностью просто повесят трубку.

Таким образом, все респонденты взвешивают свои ответы. То есть они пытаются скорректировать свои результаты в соответствии с известными фактами об избирателях. Но все они делают это немного по-другому. Таким образом, даже при одинаковых входных данных опроса они будут давать разные числа.

Кому доверять? Что ж, если вы посмотрите на работу Нейта Сильвера на 538, у него есть оценки того, насколько точными были избиратели на предыдущих выборах. Но это не значит, что они будут одинаково точны сейчас.

Питер Флом
источник
Спасибо, Питер. Таким образом, оценка с более низким пределом погрешности является более «точной». Есть ли способ узнать, насколько он смещен от погрешности X% +/- x1%? Я думаю, что это невозможно, если вы не знаете предпочтения отдельных образцов, верно?
Ник
Да все верно. Конечно, некоторые социологи имеют предубеждения (в ту или иную сторону). Внутренние опросы (проводимые одной или другой стороной) часто предвзяты. Один из способов сделать это - запустить несколько опросов и выпустить только те, которые являются благоприятными. Тогда есть целый вопрос "пуш-опросов", в которых вопросы о кандидате предваряются отрицательными вопросами о нем или ней.
Питер Флом
1

Это относится к области выборочного обследования. В принципе, методы работают, потому что используется рандомизация. Вот вещи, которые могут отличаться в опросах, основанных на субъективных решениях.

  1. Рамка выборки. Из какой группы избирателей мне следует взять мой образец?

  2. Как мне справиться с нестабильностью нерешительного избирателя, который может изменить свое мнение об Обаме против Ромни на основе вчерашнего опроса или следующих недель?

  3. Питер коснулся предвзятости. Литературный опрос 1936 года был катастрофой. Это выбрало кандидата-республиканца по FDR, потому что выборка кадра была основана на случайном выборе телефонных номеров. В 1936 году только верхний средний класс и богатые имели телефоны. В этой группе преобладали республиканцы, которые склонны голосовать за кандидата от республиканцев. Рузвельт победил оползнем, получив свои голоса от бедных и среднего класса, который, как правило, был группой демократов! Это иллюстрирует смещение из-за едва уловимого выбора кадра выборки.

  4. Опрос выборки касается конечных групп населения. Численность популяции равна N. Скажем, из этой популяции взята простая случайная выборка с размером n. Для простоты предположим, что бегут только Обама и Ромни. Доля голосов, которые Обама получил бы за этот кадр выборки, представляет собой среднее значение двоичных переменных (скажем, 1, если респондент выбирает Обаму, и 0 для Ромни). Дисперсия среднего значения выборки для этой переменной составляет [p (1-p) / n] [Nn] / N, где p - истинный популяционный пропортин, который выберет Обаму. [Nn] / N - конечная поправка населения. в большинстве опросов N намного больше, чем N, и правильное можно игнорировать. Глядя на p (1-p) / n, мы видим, что дисперсия уменьшается с n. Поэтому, если n велико, доверительный интервал при данном уровне достоверности станет небольшим.

Опросчики, другие опрошенные выборщики и статистики в Бюро переписей США, имеют в своем распоряжении эти статистические инструменты и используют более сложные и точные методы (кластерная случайная выборка и стратифицированная случайная выборка, чтобы упомянуть пару методов).

Когда их предположения моделирования верны, методы работают замечательно. Выходной опрос является ярким примером. В день выборов вы увидите точного победителя проекта сети почти в каждом штате задолго до почти окончательного подсчета. Это потому, что изменчивость предвыборного дня исчезла. Они исторически знают, как люди склонны голосовать, и они могут определить выбранные участки таким образом, чтобы избежать предвзятости. Сети иногда отличаются. Это может быть связано с конкуренцией за выбор победителя, опережающего менталитет других. Это также может быть в редких случаях, потому что голосование очень близко (например, президентские выборы 2000 года во Флориде).

Я надеюсь, что это даст вам более четкую картину того, что происходит. Мы больше не видим грубых ошибок, таких как «Дьюи побеждает Трумэна» в 1948 году или фиаско «Литературного дайджеста» 1936 года. Но статистика не идеальна, и статистики никогда не смогут сказать, что они уверены.

Майкл Р. Черник
источник
Спасибо за подробное объяснение. Это действительно помогло!
Ник
Мы больше не видим грубых ошибок? Значит, Клинтон победила в 2016 году? Я беру твоих известных неизвестных и поднимаю тебе черного лебедя . Как мой папа говорил: «То, что ты не знаешь, убивает тебя».
Карл
1
Мой ответ не имел ничего общего с Клинтоном и выборами 2016 года, в которых было много странных вопросов. (1) вмешательство России, (2) Клинтон выиграла всенародное голосование и (3) некоторые избиратели Трампа не хотели признавать, что будут голосовать за Трампа. Возможно, я должен добавить, что опросы могут быть неправильными, когда явка избирателей не соответствует ожиданиям.
Майкл Р. Черник