closed

zzzXAXAXAzzz

Попросили решить следующую задачку...
Имеются две системы X и Y, объединяемые в одну (X,Y). Вероятности состояний системы (X,Y) заданы таблицей. Определить полные условные энтропии H(Y|X) и H(X|Y).
Порывшись на википедии нашел вот такой мануал:
 wiki.ru
Проблема в том, что некотрые элементы таблицы у меня нули. А чтобы посчитать условную энтропию, юзая предложенные на вики формулы, надо считать log(0)... Как быть?

zzzXAXAXAzzz

млин... разделом ошибся.... перенесите плз в стади.... мега виноват....

demiurg

Чо, слабо предел от xln(x) взять? :)

zzzXAXAXAzzz

предел? а ничего что заданы конкретные константы, а не предельные значения? :)

zzzXAXAXAzzz

ребят, ну может кто-нить считал подобное?
Можно ли действительно руководствуясь пределом или какими-то другими внтуренними чувствами считать, что слагомое равно нулю?
вопрос потеряет актуальность через 20 минут, надо будет уже отправить готовое решение :(

Andrey56

очевидно 0*log0=0

demiurg

блин, очевидно, что вклад в энтропию от состояния, которое посещается с нулевой вероятностью - ноль.

kravecnata

В определении энтропии принимают 0\log 0 равным нулю (прежде всего для того, чтобы энтропия не зависела от фиктивных переменных).

zzzXAXAXAzzz

всем спасибо
Оставить комментарий
Имя или ник:
Комментарий: