Как формула Шеннона применяется в криптографии и теории информации?

В криптографии формула Шеннона используется для измерения ненадёжности криптограмм. techlibrary.ru asu.bru.by Она показывает, насколько близка средняя криптограмма из N букв к единственному решению, то есть насколько неточно известно противнику истинное сообщение после перехвата криптограммы из N букв. techlibrary.ru asu.bru.by

Ненадёжность является теоретическим показателем секретности, поскольку позволяет противнику дешифровать криптограмму лишь в том случае, если он обладает неограниченным запасом времени. techlibrary.ru

В теории информации формула Шеннона применяется для вычисления количества информации, если вероятность события распределена неравномерно. foxford.ru Величина, полученная по формуле, часто называется информационной энтропией или средним количеством информации, которую получают при полном снятии неопределённости. foxford.ru

Кроме того, в теории информации существует теорема Шеннона об источнике шифрования, которая устанавливает предел максимального сжатия данных и числовое значение энтропии Шеннона. ru.ruwiki.ru