Может ли апостериорная вероятность быть> 1?

18

В формуле Байеса:

P(x|a)=P(a|x)P(x)P(a)

может ли задняя вероятность превысить 1?P(x|a)

Я думаю, что это возможно, если, например, предполагая, что и , и . Но я не уверен в этом, потому что это будет означать, что вероятность будет больше единицы?P ( a ) < P ( x ) < 1 P ( a ) / P ( x ) < P ( a | x ) < 10<P(a)<1P(a)<P(x)<1P(a)/P(x)<P(a|x)<1

Томас Мур
источник
6
Надо быть точным в определении обозначения. Неясно, что представляет собой . Если - это (a) распределение вероятностей (в этом случае и являются множествами) или (b) функция массы в дискретном пространстве, то ответы, которые у вас уже есть, по существу правильны. Если понимается как функция плотности, то неверно, что . Причина придирки в том, что все три типа функций удовлетворяют правилу Байеса. Обозначение обычно используется для распределения, но использование строчных символов в качестве аргументов предполагает плотность. P ( P()P()axP()P(xa)1P()
парень
2
P(xa)=P(x,a)P(a)P(a)P(a)=1 поэтому апостериорная вероятность не может превышать . (Задняя плотность - это другое дело - множество непрерывных распределений имеют плотности, превышающие для некоторых значений)111
Генри
Если вычисленный апостериор превышает единицу, вы где-то допустили ошибку.
Эмиль М Фридман
2
@EmilMFriedman, ваш ответ неоднозначен (и, по этой причине, потенциально вреден), потому что он не указывает, относится ли он к «вычисленной апостериорной» вероятности или плотности.
whuber
Барьер единства в вероятности может и был преодолен. Смотрите мой пост на stats.stackexchange.com/questions/4220/… .
Марк Л. Стоун

Ответы:

8

Предполагаемые условия не выполняются - никогда не может быть истиной, что по определению условной вероятности :P(a)/P(x)<P(a|x)

P(a|x)=P(ax)/P(x)P(a)/P(x)

Холь
источник
28

Нет, апостериорная вероятность не может превышать единицу. Это было бы нарушением нормирующей аксиомы теории вероятностей. Используя правила условной вероятности, вы должны иметь:

P(a|x)=P(a,x)P(x)P(a)P(x).

Это означает, что вы не можете иметь условия неравенства, которые вы указали. (Кстати, это хороший вопрос: хорошо, что вы изучаете законы вероятности в поисках проблем. Это показывает, что вы изучаете эти вопросы с большей степенью строгости, чем большинство студентов.)

Дополнительное замечание: Стоит сделать еще одно замечание по поводу этой ситуации, касающееся логического приоритета различных характеристик вероятности. Помните, что теория вероятностей начинается с набора аксиом, которые характеризуют, что такое мера вероятности. Из этих аксиом мы можем вывести «правила вероятности», которые являются теоремами, выведенными из аксиом. Эти правила вероятности должны соответствовать аксиомам, чтобы быть действительными. Если вы когда-либо обнаружили, что правило вероятности приводит к противоречию с одной из аксиом (например, вероятность выборочного пространства больше единицы), это не приведет к фальсификации аксиомы - это приведет к фальсификации правила вероятности . Следовательно, даже если бы это было так, правило Байеса могло быпривести к апостериорной вероятности больше единицы (это не так), это не значит, что у вас может быть апостериорная вероятность больше единицы; это просто означало бы, что правило Байеса не является действительным правилом вероятности.

Восстановить Монику
источник
1
Должен ли окончательный числитель быть P (x)?
BallpointBen
Все еще показывает P (a) для меня
BallpointBen
1
Предполагается, что в числителе P (a). Неравенство показывает ОП, что он не может иметь P (a | x)> P (a) / P (x), как он указал в своем вопросе.
Восстановите Монику
9

Формула Байеса не может давать значения дляP(BA),превышающие1. Интуитивный способ увидеть это состоит в выраженииP(A)помощью закона полной вероятности как P(A)=P(A|B)P(B)+P(A|Bгр)P(BC)даетчто P(BP(BA)=P(AB)P(B)P(A)P(BA)1P(A)

P(A)=P(AB)P(B)+P(ABc)P(Bc)
который показывает, что числитель является лишь одним из слагаемых в сумме в знаменателе, и поэтому дробь не может превышать1по значению ,
P(BA)=P(AB)P(B)P(A)=P(AB)P(B)P(AB)P(B)+P(ABc)P(Bc)
1
Дилип Сарватэ
источник
+1 это самое простое доказательство для меня.
Mehrdad
п(В|A)1п(A|В)п(В)знак равноп\ AВ) не может превышать п(A) так как AВA и так должно быть п\ AВ)п(A), И имеет мало отношения как таковые к формуле Байеса (как она используется в статистике для вывода апостериорных вероятностей от априорных вероятностей).
Дилип Сарвейт