logo search
ISTEОпорний конспект

2. Властивості інформації. Вимірювання інформації і даних

Рис. 1.1. Властивості інформації

Заодиницю інформації приймають кількість інформації, яка необхідна для вибору однієї із двох рівноймовірних подій.

Найменша одиниця вимірювання інформації називається двійковою одиницею абобітом (binary digit, bit). Якщо повідомлення вказує на один із n рівноймовірних варіантів, то воно несе кількість інформації, яка рівна log2n. Інакше кажучи, кількість інформації рівна показнику степеня, до якого потрібно піднести число 2, щоб отримати кількість рівноправних варіантів вибору.

Вінформатиці прийнята система представлення даних за допомогою двійкового коду. Найменшою одиницею такого представлення єбіт. Необхідно розуміти різницю між кількістю інформації яка представлена двійковим кодом, і кількістю інформації, яку містить даний код.