Вероятность событий влияет на количество получаемой информации следующим образом: чем менее вероятно событие, тем больше информации оно несёт. 25 Редкое событие содержит больше информации, и, наоборот, частое, вероятное событие — меньше. 2
Это можно выразить формулой: I = log2(1/p), где I — количество информации, p — вероятность события. 15