Если предполагается, что непараметрические тесты имеют меньшую мощность, чем их параметрические альтернативы, означает ли это, что если какой-либо параметрический тест не отклоняет нуль, то его непараметрическая альтернатива также не отвергает ноль? Как это может измениться, если предположения о параметрическом тесте не выполняются и тест все равно используется?
hypothesis-testing
nonparametric
parametric
Мирослав Сабо
источник
источник
Ответы:
Если параметрический тест не может отклонить нулевую гипотезу, то его непараметрический эквивалент может определенно отклонить нулевую гипотезу. Как сказал @Джон, это обычно происходит, когда допущения, которые оправдывают использование параметрического теста, нарушаются. Например, если мы сравним t-критерий с двумя выборками с критерием суммы рангов Уилкоксона, мы сможем получить такую ситуацию, если включим выбросы в наши данные (с выбросами мы не должны использовать тест с двумя выборками).
Результаты выполнения теста:
источник
Нет.
Хотя параметрические тесты могут быть более мощными, это не всегда так. Когда это не так, то обычно в ситуациях, когда вам не следует выполнять параметрические тесты.
Но даже если вы собираете образцы приличного размера из нормальных распределений с равной дисперсией, где параметрический тест имеет более высокую мощность, это не гарантирует, что для какого-либо конкретного эксперимента не значимый параметрический тест означает несущественный непараметрический тест. Вот симуляция, которая просто использует случайную выборку из нормальных распределений и обнаруживает, что примерно в 1,8% случаев, когда р> 0,05 для t-теста, что р <0,05 для теста Уилкоксона.
Вы можете заметить, что в этом моделировании мощность параметрического теста больше, чем непараметрического теста (хотя они похожи).
Но, как показано выше, это не означает, что во всех случаях, когда параметрический тест не может найти эффект, что непараметрический тест также не проходит.
Вы можете играть с этим моделированием. Сделайте n достаточно большим, скажем, 1000, и уменьшите размер эффекта, скажем, 0,02 (вам нужно малое энергопотребление, чтобы иметь много образцов, где тест не пройден). При n = 1000 вы можете быть в значительной степени уверены, что ни один из образцов не будет отклонен из-за ненормальности (проверкой, а не глупым тестом) или с подозрительными выбросами. Тем не менее, некоторые из параметрических тестов оказываются несущественными, в то время как непараметрические тесты значимы.
Вы также можете посмотреть на Hunter & May (1993).
Hunter, MA & May, RB (1993). Некоторые мифы о параметрических и непараметрических критериях. Канадская психология, 34 (4), 384-389.
источник