Для информации существуют свои единицы измерения информации. Если рассматривать сообщения информации как последовательность знаков, то их можно представлять битами, а измерять в байтах, килобайтах, мегабайтах, гигабайтах, терабайтах и петабайтах.

Давайте разберемся с этим, ведь нам придется измерять объем памяти и быстродействие компьютера.

Бит

Единицей измерения количества информации является бит – этонаименьшая (элементарная) единица.

Байт

Байт – основная единица измерения количества информации.

Байт – довольно мелкая единица измерения информации. Например, 1 символ – это 1 байт.

Производные единицы измерения количества информации

1 байт=8 битов

1 килобайт (Кб)=1024 байта =2¹⁰ байтов

1 мегабайт (Мб)=1024 килобайта =2¹⁰ килобайтов=2²⁰ байтов

1 гигабайт (Гб)=1024 мегабайта =2¹⁰ мегабайтов=2³⁰ байтов

1 терабайт (Гб)=1024 гигабайта =2¹⁰ гигабайтов=2⁴⁰ байтов

Запомните, приставка КИЛО в информатике – это не 1000, а 1024, то есть 2¹⁰.

Методы измерения количества информации

Итак, количество информации в 1 бит вдвое уменьшает неопределенность знаний. Связь же между количеством возможных событий N и количеством информации I определяется формулой Хартли:

Алфавитный подход к измерению количества информации

При этом подходе отвлекаются от содержания (смысла) информации и рассматривают ее как последовательность знаков определенной знаковой системы. Набор символов языка, т.е. его алфавит можно рассматривать как различные возможные события. Тогда, если считать, что появление символов в сообщении равновероятно, по формуле Хартли можно рассчитать, какое количество информации несет в себе каждый символ:

Вероятностный подход к измерению количества информации

Этот подход применяют, когда возможные события имеют различные вероятности реализации. В этом случае количество информации определяют по формуле Шеннона:

.

I – количество информации,

N – количество возможных событий,

P_i – вероятность i-го события.

Сложно? Непонятно? Ничего страшного!