1. В чём заключается неопределённость?
Ответ
Неопределенность — это недостаток или отсутствие информации о чем-либо.
Неопределённость информации связана с недостатком знаний о каком-либо объекте, событии или явлении. Чем больше неопределённости, тем меньше мы знаем о системе, и тем больше информации требуется, чтобы устранить эту неопределённость.
Количество информации измеряется в зависимости от того, насколько сообщение или данные уменьшают неопределённость. Основываясь на теории информации, разработанной Клодом Шенноном, можно сказать, что чем больше вариантов исхода какого-то события, тем выше неопределённость, и тем больше информации потребуется, чтобы точно узнать этот исход.
Пример:
Если мы подбрасываем монету, то есть два возможных исхода — орёл или решка. Неопределённость минимальна, и для её устранения требуется мало информации. Но если вместо монеты бросать кубик с шестью гранями, то количество исходов увеличивается, и чтобы точно определить результат броска, нужно больше информации.
Формула для количества информации, предложенная Шенноном, измеряет её в битах и основана на вероятности события. Чем менее вероятен исход, тем больше информации мы получаем, узнав его.