Вопросы с тегом «reliability»

Считается, что мера имеет высокую надежность, если она дает аналогичные результаты в согласованных условиях. НЕ путайте надежность с действительностью (см. Тег вики). НЕ используйте для надежности оценки, которая имеет свой собственный тег

44
Вычисление дисперсии Коэна (и стандартных ошибок)

Статистика Каппа ( κκ\kappa ) была введена Коэном в 1960 году [1] для измерения согласия между двумя оценщиками. Однако его дисперсия была источником противоречий довольно долгое время. Мой вопрос о том, какой расчет отклонений является лучшим для больших выборок. Я склонен полагать, что...

31
За каким распространением следуют мои данные?

Допустим, у меня есть 1000 компонентов, и я собираю данные о том, сколько раз они регистрируют сбой, и каждый раз, когда они регистрируют сбой, я также отслеживаю, сколько времени понадобилось моей команде, чтобы устранить проблему. Короче говоря, я записывал время ремонта (в секундах) для каждого...

28
Вычисление повторяемости эффектов по модели Лмера

Я только что наткнулся на эту статью , в которой описывается, как вычислить повторяемость (или надежность, или внутриклассовую корреляцию) измерения с помощью моделирования смешанных эффектов. Код R будет: #fit the model fit = lmer(dv~(1|unit),data=my_data) #obtain the variance estimates vc =...

25
Является ли «Охота на Снарка» Джоэла Спольски достоверным статистическим анализом содержания?

Если вы в последнее время читали бюллетени сообщества, вы, вероятно, видели сообщение «Охота на Снарка» на официальном блоге StackExchange Джоэла Спольски, генерального директора сети StackExchange. Он обсуждает статистический анализ, проведенный на примере комментариев SE, чтобы оценить их...

25
Межрассовая надежность для порядковых или интервальных данных

Какие методы оценки надежности наиболее подходят для порядковых или интервальных данных? Я считаю, что «Совместная вероятность соглашения» или «Каппа» предназначены для номинальных данных. Хотя можно использовать «Пирсон» и «Спирмен», они в основном используются для двух оценщиков (хотя они могут...

16
Точность против площади под кривой ROC

Я построил кривую ROC для диагностической системы. Площадь под кривой была непараметрически оценена как AUC = 0,89. Когда я попытался вычислить точность при оптимальной настройке порога (точка, ближайшая к точке (0, 1)), я получил точность диагностической системы равной 0,8, что меньше, чем AUC!...

16
Оценка надежности вопросника: размерность, проблемные элементы, а также следует ли использовать альфа, лямбда6 или какой-то другой индекс?

Я анализирую оценки участников эксперимента. Я хочу оценить надежность моей анкеты, которая состоит из 6 пунктов, направленных на оценку отношения участников к продукту. Я вычислил альфу Кронбаха, рассматривая все элементы как одну шкалу (альфа был около 0,6) и удаляя один элемент за раз...

14
Карет глмнет против cv.glmnet

Кажется, существует большая путаница при сравнении использования glmnetвнутри caretдля поиска оптимальной лямбды и использования cv.glmnetдля выполнения той же задачи. Было задано много вопросов, например: Модель классификации train.glmnet против cv.glmnet? Как правильно использовать glmnet с...

14
Откуда берутся дескрипторы альфа-значений Кронбаха (например, плохо, отлично)?

Кажется довольно распространенным, чтобы описать альфа-значения Кронбаха следующим образом: α ≥ 0,9 Отлично 0,7 ≤ α <0,9 Хорошо 0,6 ≤ α <0,7 Приемлемо 0,5 ≤ α <0,6 Плохо α <0,5 Недопустимо Откуда эти ценности? Я не могу найти оригинальную исследовательскую статью, описывающую их....

14
Каковы тематические исследования в исследованиях политики общественного здравоохранения, когда ненадежные / смешанные / недействительные исследования или модели были использованы не по назначению?

Я готовлю обзор литературы по актуальной проблеме общественного здравоохранения, в которой данные путаницы: Каковы общие исторические тематические исследования, которые используются в области общественного здравоохранения / эпидемиологии, где недействительные или ошибочные отношения или выводы были...

13
Interrater надежность для событий во временном ряду с неопределенностью относительно времени события

У меня есть несколько независимых кодеров, которые пытаются идентифицировать события во временном ряду - в этом случае я смотрю видео разговора лицом к лицу и ищу конкретные невербальные поведения (например, кивает головой) и кодирует время и категорию каждого событие. Эти данные целесообразно...

12
Выявление бесполезных вопросов из анкеты

Я разрабатываю анкету. Для повышения его надежности и достоверности я хочу использовать статистические методы. Я хочу исключить вопросы, ответы на которые всегда одинаковы. Это означает, что почти все участники дали одинаковые ответы на эти вопросы. Теперь мои вопросы: Какой технический термин для...

12
Как уменьшить количество элементов, используя факторный анализ, внутреннюю согласованность и теорию отклика элементов в сочетании?

Я нахожусь в процессе эмпирической разработки вопросника, и я буду использовать произвольные числа в этом примере для иллюстрации. Для контекста я разрабатываю психологическую анкету, нацеленную на оценку моделей мышления, которые обычно выявляются у людей с тревожными расстройствами. Элемент может...

11
Надежность подобранной кривой?

Я хотел бы оценить неопределенность или надежность подобранной кривой. Я намеренно не называю точную математическую величину, которую ищу, потому что не знаю, что это. Здесь (энергия) является зависимой переменной (отклик), а V (объем) является независимой переменной. Я хотел бы найти кривую...

11
Насколько точен IQR для обнаружения выбросов

Я пишу сценарий, который анализирует время выполнения процессов. Я не уверен в их распространении, но хочу знать, выполняется ли процесс «слишком долго». До сих пор я использовал 3 стандартных отклонения времени последнего запуска (n> 30), но мне сказали, что это не дает ничего полезного, если...

11
Омега против альфа надежности

Интересно, может кто-нибудь объяснить, в чем главное отличие омега-альфа-надежности? Я понимаю, что надежность омеги основана на иерархической факторной модели, как показано на следующем рисунке, и альфа использует средние межэлементные корреляции. Что я не понимаю, так это то, в каком состоянии...

11
Можно ли достоверно уменьшить количество предметов в опубликованной шкале Лайкерта?

[правки сделаны в ответ на отзыв- спасибо :-)] Doh! Больше правок! Сожалею! Привет- Я делаю довольно грубый и готовый сбор данных с опросом, направленным медицинскому персоналу с использованием опубликованной шкалы о моральном духе и других подобных вопросах. Единственное, что масштаб довольно...

10
Как мне включить инновационный выброс при наблюдении 48 в мою модель ARIMA?

Я работаю над набором данных. После использования некоторых методов идентификации моделей я разработал модель ARIMA (0,2,1). Я использовал detectIOфункцию в пакете TSAв R, чтобы обнаружить инновационный выброс (IO) на 48-м наблюдении за моим исходным набором данных. Как включить этот выброс в мою...

10
Коэффициент внутриклассовой корреляции против F-критерия (односторонний ANOVA)?

Я немного запутался в отношении коэффициента внутриклассовой корреляции и одностороннего ANOVA. Насколько я понимаю, оба рассказывают, насколько похожи наблюдения внутри группы по сравнению с наблюдениями в других группах. Может ли кто-то объяснить это немного лучше и, возможно, объяснить ситуацию,...

10
Как измерить достоверность консенсусного рейтинга (проблема из книги Кемени-Снелла)

Предположим, что каждому из экспертов поручено ранжировать набор из n объектов в порядке или предпочтении. Пусть разрешают связи в рейтингах.kkknnn Джон Кемени и Лори Снелл в своей книге 1962 года «Математические модели в социальных науках» предлагают решить следующую проблему: ПРОЕКТ ....