Описание исследования:
Я наблюдал распространенную ошибку среди метаанализов в отношении обработки репликации в рамках исследования. Мне не ясно, если ошибка делает недействительными исследования, когда высказываются предположения. Однако, насколько я понимаю, эти предположения нарушают основную статистическую предпосылку.
В качестве примера, исследование проверяет влияние химического на ответ Y .
Анализ проводят по логарифмическому соотношению: отношение лечения (в присутствии X ) к контролю Y 0 (без X ):
Некоторые из исследований , включенных в мета-анализ содержит несколько процедур, например , различные уровни или химические формы . Для каждой обработки существует различное значение R , хотя R всегда использует одно и то же значение Y 0 .
Методы утверждают:
Ответы на различные методы лечения (уровни и формы ) в рамках одного исследования считались независимыми наблюдениями.
Вопросов:
- Разве это не псевдорепликация?
- Это неуместно, даже если в методах указано нарушение независимости?
- Что было бы простым способом (например, в пределах способности простого пакета программного обеспечения мета-анализа) обрабатывать в рамках репликации исследования?
Начальные мысли:
- Суммируйте результаты каждого исследования, например, взяв средний ответ
- Выберите только одно лечение из каждого исследования на основе априорных критериев (например, самая высокая доза, первое измерение)?
Есть ли другие решения?
источник
Ответы:
Да, это проблема, потому что в ответах есть выборочная зависимость, которую нужно было учесть (хотя иногда эффект может быть незначительным, и мы все время нарушаем допущение, когда проводим статистический анализ). Существуют методы для решения этой проблемы. Один из подходов состоит в том, чтобы включить ковариации между соответствующими экспериментами (недиагональные блоки) в матрицу дисперсии-ковариации ошибки (см., Например, Hedges et al., 2010). К счастью, с логарифмами это довольно просто. Вы можете получить приблизительные ковариации между экспериментами, потому что дисперсия (var) log R равна (если Yx и Y0 независимые группы): log Yx - log Y0, чтобы следовать обозначениям в вопросе, Yx относится к экспериментальной группе, а Y0 - контрольная группа. Ковариация (cov) между двумя значениями (например, обработка 1 och обработка 2) для log R представляет собой cov (лог Yx_1 - log Y0, log Yx_2 - log Y0), что равно var (log Y0) и рассчитывается как SD_Y0 / (n_Y0 * Y0), где SD_Y0 - стандартное отклонение Y0, n_Y0 - размер выборки в контрольной обработке, а Y0 - значение в контрольной обработке. Теперь мы можем подключить всю матрицу дисперсии-ковариации в нашу модель вместо того, чтобы использовать только дисперсии (ei), которые являются классическим способом выполнения мета-анализа. Пример этого можно найти вLimpens et al. 2011 с использованием пакета metahdep в R (на биокондукторе) или Stevens and Taylor 2009 для D. Хеджа
Если вы хотите, чтобы все было очень просто, я бы соблазнился проигнорировать проблему и попытаться оценить эффект зависимости выборки (например, сколько обработок проводится в исследованиях? Как меняются результаты, если я использую только одну обработку? И т. Д.) ,
источник
Да, это проблема.
Да, это неуместно, хотя, по крайней мере, он прозрачен в том, что делает (он получает очки за прозрачность, но все же не является удовлетворительным).
Я сомневаюсь, что есть "легкий способ" исправить это. Я не знаю много о подходах к мета-анализу, но если есть специальное программное обеспечение для мета-анализа, и подобные исследования производятся с его использованием и публикуются, это вполне может быть общий подход. Любой из ваших предложенных ответов теряет некоторую детализацию информации из каждого исследования (то есть противоположную проблему того, что сделали издатели).
Очевидным решением является модель со смешанными эффектами (т.е. многоуровневая) с изучением в качестве случайного фактора. Я бы предложил использовать для этого специальный статистический пакет, если программное обеспечение мета-анализа не может этого сделать. Вы все еще можете использовать программное обеспечение мета-анализа для хранения и обработки данных и просто экспортировать данные в R, Stata или SAS для анализа.
источник