Документы с незначительными результатами

3

Я видел несколько статей, в которых публикуются несущественные результаты, такие как ответы (см. Ответ Истерли, опубликованный в документе AER для Burnside и Dollars World Bank под названием «Помощь, политика и рост»). Цель этих работ, однако, состоит в том, чтобы отрицать положительное утверждение, которое они делают, производя незначительные результаты (в смысле проверки гипотез), используя ту же идею, что и первоначальные авторы, но используя новые данные. Тем не менее, я до сих пор попадался основной бумага в своем собственном праве , опубликованном в топе - 5 журналов , которые публикуют результаты , которые являются незначительными. Это страшная мысль, потому что, когда я делаю свое собственное исследование, я всегда содрогаюсь перед вводом команды regress yx. Есть ли известные статьи, которые публикуют незначительные результаты? Спасибо!

Ching
источник

Ответы:

4

Это не дает прямого ответа на ваш вопрос, но я постараюсь объяснить, почему я не думаю, что такие известные статьи существуют.

Я не думаю, что такая статья будет принята в пятерке лучших журналов. Это потому, что журналы также конкурируют, чтобы оставаться актуальными, чтобы дать удивительную информацию. Это явление известно как предвзятость публикации .

Это было также большой проблемой для медицинского сообщества. Решение, к которому они пришли, заключается в том, что они принимают испытания только в том случае, если в начале процесса властям сообщается о процессе и его гипотезе. Из-за этого результат будет сохранен независимо от того, что это такое. Хотя неудивительные результаты вряд ли получат широкую огласку, их может найти исследователь, который их ищет. Одно и то же решение не может работать для экономических регрессий, поскольку выполнение регрессии на одних и тех же данных всегда дает один и тот же результат. Следовательно, ложные срабатывания являются результатом не удачных выборок, а подстройки модели к конкретным данным.

Giskard
источник
2
Не могли бы вы быть немного яснее в своем последнем абзаце? Мне кажется, я не до конца понимаю разницу, которую вы делаете между проблемой в медицине и проблемой в экономике, и как это изменяет предвзятость публикации в этих двух областях.
Алекос Пападопулос
Медицина: Предположим, у вас есть таблетка, которая не оказывает лечебного эффекта. Если вы проведете 20 испытаний «в среднем», одно из них даст результаты, значимые на уровне 5%. Пропуск других испытаний дает ложную оценку вероятности эффективности. Если вы повторите то же самое испытание, таблетка вряд ли снова окажет существенное влияние, потому что следующая случайная выборка не зависит от этой.
Жискар
Экономика: у вас есть некоторые данные, и вы пытаетесь построить модель вокруг них. Если вы запустите 20 регрессий, каждая из которых имеет совершенно разные функциональные формы, у вас снова будет «в среднем» такая, которая предоставляет данные, значимые на уровне 5%. Случайность здесь была в форме функции, а не данных. Никто не станет утверждать, что вы должны изменить форму своей функции. Ваша модель кажется надежной, пока не появятся новые данные. Конечно, перед публикацией у вас может быть обязательный 10-летний период ожидания.
Жискар