В чем заключается связь между неопределенностью знаний и объемом получаемой информации?

Связь между неопределённостью знаний и объёмом получаемой информации заключается в том, что чем больше неопределённость, тем больше информации несёт сообщение. www.yaklass.ru multiurok.ru

Неопределённость знания — это количество возможных вариаций ответа на поставленный вопрос. www.yaklass.ru Сообщение, которое информирует об исходе некоторого события, снимает эту неопределённость. www.yaklass.ru

Например, перед броском монеты существует неопределённость знаний (возможны два события), как она упадёт предсказать невозможно. multiurok.ru После броска наступает полная определённость, так как известно, что монета находится в определённом положении, например, «решка». multiurok.ru В этом случае неопределённость знаний уменьшается в два раза, так как до броска было два вероятных события, а после — только одно, то есть в два раза меньше. multiurok.ru

Таким образом, чем больше количество возможных событий, тем больше начальная неопределённость и, соответственно, тем большее количество информации будет содержать сообщение о результатах опыта. multiurok.ru