В чем отличие классической и вероятностной модели измерения информации?

Возможно, имелись в виду различия между содержательным (классическим) и вероятностным подходами к измерению информации. ru.ruwiki.ru resh.edu.ru

Содержательный подход рассматривает информацию с точки зрения её содержания, понятности и новизны для человека. ru.ruwiki.ru При таком подходе количество информации в сообщении зависит от того, насколько оно ново для получателя. sites.google.com Этот подход называют субъективным, так как разные люди по-разному оценивают информацию об одном и том же предмете. ru.ruwiki.ru

Вероятностный подход применяют, когда возможные события имеют различные вероятности реализации. ru.ruwiki.ru При таком подходе чем менее вероятно событие, тем более «ценно» оно с точки зрения информации. maximumtest.ru Редкое событие несёт больше информации, и наоборот, частое, вероятное событие — меньше. maximumtest.ru

Таким образом, отличие заключается в том, что содержательный подход фокусируется на субъективной оценке информации, а вероятностный — на измерении информации с учётом вероятностей различных событий.