Как формула Хартли связана с вероятностью и равновероятными событиями?

Формула Хартли связывает количество информации с числом равновероятных событий. multiurok.ru

Формула Хартли имеет вид I = log2 N, где I — количество информации, N — число равновероятных событий. multiurok.ru

Связь с вероятностью заключается в том, что если наступление каждого из N событий имеет одинаковую вероятность P, то P = 1/N. multiurok.ru

Также есть вывод, что с увеличением числа вероятных событий (N) увеличивается количество информации (I), полученной при совершении одного из событий. multiurok.ru

При этом во многих случаях события происходят с разной вероятностью, и формула Хартли не всегда применима. in.lit.msu.ru Тогда, зная вероятность (p) событий, можно определить количество информации (i) в сообщении о каждом из них из формулы: 2i = 1 / p. in.lit.msu.ru