Слово “information” действительно переводится с латинского языка, как “осведомление”, “разъяснение”, и такое определение устраивало человечество до сороковых годов двадцатого века.
Этим термином пользовались для определения чисто практических понятий, таких, как некоторая совокупность знаний, сведений о конкретном предмете, явлении, событии. Такая информация носит вполне конкретный характер и во многих случаях не несёт в себе количественной оценки.
- Информация – это обозначение содержания, полученного от внешнего мира в процессе приспособления к нему (Н. Винер).
- Информация – отрицательная энтропия (негэнтропия) (Л. Бриллюэн).
- Информация – вероятность выбора (А. М. Яглом, И. М. Яглом).
- Информация – снятая неопределенность (К. Шеннон).
- Информация – мера сложности структур, мера упорядоченности материальных систем (А. Моль).
- Информация - снятая неразличимость, передача разнообразия (У.Р. Эшби).
- Информация – отраженное разнообразие (А. Д. Урсул).
- Информация – мера неоднородности распределения материи и энергии в пространстве и времени (В. М. Глушков).
Минимальная неопределенность равна 0, т.е. эта ситуация полной определенности, означающая что выбор сделан, и вся необходимая информация получена. Распределение вероятностей для ситуации полной определенности выглядит так: