Информационная ёмкость символа в алфавитном тексте определяется на основе мощности алфавита. 3 Это полное количество символов в алфавите. 3
Если допустить, что все символы алфавита встречаются в тексте с одинаковой частотой (равновероятно), то количество информации, которое несёт каждый символ, вычисляется по формуле: i = Log2 N, или 2i = N, где N — мощность алфавита. 1
Например, информационная ёмкость знака двоичной знаковой системы составляет 1 бит. 3
Чтобы определить объём информации в сообщении при алфавитном подходе, нужно последовательно решить задачи: 1