Как влияет длина сообщения на его информационный объем в естественной языковой коммуникации?

Длина сообщения влияет на его информационный объём: чем больше текст, тем больше информации он содержит и тем больше битов или байтов требуется для его представления. umschool.net

Информационный объём сообщения, представленного символами естественного языка, складывается из информационных весов составляющих его символов. reshak.ru Для расчёта используется формула: I = k |* i, где: umschool.net

• k — количество символов в сообщении; umschool.net
• i — информационный вес символа (бит). umschool.net

Например, если есть текст из 100 символов, и каждый символ представляется 8 битами, то объём информации будет равен 800 бит (100 символов |* 8 бит). umschool.net

Однако на длину сообщения влияет не только содержащаяся в нём информация, но и мощность алфавита используемого языка. studfile.net Чем меньше знаков в алфавите, тем длиннее сообщение. studfile.net