Вопросы с тегом «multiple-comparisons»

22
Почему байесовские методы не требуют множественных исправлений тестирования?

Эндрю Гельман (Andrew Gelman) написал обширную статью о том, почему байесовское тестирование AB не требует множественной коррекции гипотез: почему мы (обычно) не должны беспокоиться о множественных сравнениях , 2012. Я не совсем понимаю: почему байесовские методы не требуют множественных...

22
Метод Z-счета Стоуффера: что если мы сложим вместо ?

Я выполняю независимых статистических тестов с одинаковой нулевой гипотезой и хотел бы объединить результаты в одно значение. Кажется, что есть два «принятых» метода: метод Фишера и метод Стоуффера .NNNppp Мой вопрос о методе Стоуффера. Для каждого отдельного теста я получаю z-оценку . Под нулевой...

21
Как спроецировать новый вектор на пространство PCA?

После выполнения анализа главных компонентов (PCA) я хочу спроецировать новый вектор на пространство PCA (т.е. найти его координаты в системе координат PCA). Я рассчитал PCA на языке R, используя prcomp. Теперь я должен быть в состоянии умножить свой вектор на матрицу вращения PCA. Должны ли...

21
Как и когда использовать настройку Бонферрони

У меня есть два вопроса относительно того, когда использовать настройку Бонферрони: Целесообразно ли использовать корректировку Бонферрони во всех случаях множественного тестирования? Если кто-то выполняет тест на наборе данных, то он разбивает этот набор на более мелкие уровни (например, разбивает...

20
Если несколько сравнений «запланированы», нужно ли вам исправлять множественные сравнения?

Я рецензирую статью, в которой было выполнено> 15 отдельных тестов хи-квадрат 2х2. Я предположил, что им нужно исправить множественные сравнения, но они ответили, что все сравнения были запланированы, и поэтому в этом нет необходимости. Я чувствую, что это не должно быть правильно, но я не могу...

20
Когда вы можете использовать критерии на основе данных для определения регрессионной модели?

Я слышал, что когда многие спецификации регрессионных моделей (скажем, в OLS) рассматриваются как возможности для набора данных, это вызывает многочисленные проблемы сравнения, а значения p и доверительные интервалы перестают быть надежными. Одним из крайних примеров этого является ступенчатая...

20
Пост-хоккей в рамках предметных тестов?

Какой метод является предпочтительным для проведения специальных тестов для внутрисубъектных тестов? Я видел опубликованную работу, где используется HSD Тьюки, но обзор Keppel и Maxwell & Delaney предполагает, что вероятное нарушение сферичности в этих конструкциях делает ошибочный термин...

19
Путаница с ложным уровнем обнаружения и многократным тестированием (на Colquhoun 2014)

Я прочитал эту замечательную статью Дэвида Колкхуна: исследование уровня ложных открытий и неправильного толкования р-значений (2014). По сути, он объясняет, почему частота ложных обнаружений (FDR) может достигать даже если мы контролируем ошибку типа I с α = 0,05 .30 %30%30\%α = 0,05αзнак...

19
Зачем вообще использовать ANOVA вместо того, чтобы прыгать прямо в специальные тесты или тесты сравнения?

Глядя на ситуацию с ANOVA между группами, что вы получаете, фактически выполняя сначала такой тест ANOVA, а затем - специальные (Bonferroni, Šidák и т. Д.) Или запланированные сравнительные тесты? Почему бы не пропустить шаг ANOVA полностью? Я понимаю, что в такой ситуации единственным...

19
Является ли коррекция Бенджамини-Хохберга более консервативной по мере увеличения числа сравнений?

Насколько консервативна коррекция множественных тестов Бенджамини-Хохберга относительно общего числа сравнений? Например, если у меня есть список из 18 000 функций для двух групп, и я выполняю тест Вилкоксона, чтобы получить p-значение. Я корректирую это значение p, используя Бенджамини-Хохберга, и...

18
Бонферрони или Тьюки? Когда количество сравнений становится большим?

Чтение в поле Обнаружение статистики с использованием SPSS (3-е издание) Я был немного поражен специальными тестами в ANOVA. Для тех, кто хочет контролировать частоту ошибок типа I, он предлагает Бонферрони или Тьюки и говорит (стр. 374): Бонферрони обладает большей силой, когда количество...

18
Что означает «зависимый» и «независимый» тесты в литературе по множественным сравнениям?

В литературе как по частоте появления ошибок (FWER), так и по частоте ложных обнаружений (FDR) конкретные методы контроля FWER или FDR считаются подходящими для зависимых или независимых тестов. Например, в статье 1979 года «Простая последовательная объективная процедура множественных испытаний»...

17
Меры сходства между кривыми?

Я хотел бы вычислить меру сходства между двумя упорядоченными наборами точек - теми, что под Пользователем, и теми, что под Учителем : Точки - это кривые в трехмерном пространстве, но я думал, что проблема упрощается, если я нанесу их в двух измерениях, как на картинке. Если точки перекрываются,...

17
Независимость от остатков в компьютерном эксперименте / моделировании?

Я провел компьютерную оценку различных методов подгонки модели определенного типа, используемой в науках о палео. У меня был большой тренировочный набор, и поэтому я случайно (стратифицированная случайная выборка) отложил тестовый набор. Я подгонял различных методов к выборкам обучающих наборов и,...

16
Почему контроль FDR менее строг, чем контроль FWER?

Я читал, что контроль FDR менее строг, чем контроль FWER, например, в Википедии : Процедуры контроля FDR обеспечивают менее строгий контроль над ложным обнаружением по сравнению с процедурами семейной частоты ошибок (FWER) (такими как коррекция Бонферрони). Это увеличивает мощность за счет...

15
Какой метод множественного сравнения использовать для модели lmer: lsmeans или glht?

Я анализирую набор данных, используя модель смешанных эффектов с одним фиксированным эффектом (условием) и двумя случайными эффектами (участник из-за дизайна объекта и пары). Модель была сгенерирована с lme4пакетом: exp.model<-lmer(outcome~condition+(1|participant)+(1|pair),data=exp). Затем я...

15
Какова интуиция за сменными образцами при нулевой гипотезе?

Тесты перестановки (также называемые тестом рандомизации, тестом повторной рандомизации или точным тестом) очень полезны и оказываются полезными, когда предположение о нормальном распределении, требуемое, например, t-testне выполняется, и когда преобразование значений путем ранжирования...

14
Классификаторы машинного обучения Big-O или сложности

Чтобы оценить производительность нового алгоритма классификатора, я пытаюсь сравнить точность и сложность (большое в обучении и классификации). Из машинного обучения: обзор Я получаю полный список контролируемых классификаторов, а также таблицу точности между алгоритмами и 44 задачи тестирования из...

14
Повторные измерения с течением времени с небольшим

Мне дали данные для анализа исследования, изучающего влияние лечения на уровни железа в четыре разных момента времени (до лечения, день лечения закончился, через 4 недели после лечения и через 2-4 месяца после лечения). Контрольной группы нет. Они хотят увидеть, наблюдается ли значительное...

14
Какова формула для скорректированного p-значения Бенджамини-Хохберга?

Я понимаю процедуру и то, что она контролирует. Итак, какова формула для скорректированного значения p в процедуре ЧД для множественных сравнений? Только сейчас я понял, что исходная ЧД не выдает скорректированные значения p, а только скорректировала (не) условие отклонения:...