Измерение информации

1. Содержательный подход

1.1. Кол-во информации-мера уменьшения неопределенности знания

1.1.1. Единицы информации:бит,байт,Кбайт...

2. Алфавитный подход

2.1. Количество символов в алфавите(его размер)называется мощностью алфавита (N)

2.2. N=2 в степени i

2.2.1. i-количество информации в одном символе

2.2.2. I=K*i

2.2.2.1. I-объём сообщения

2.2.2.2. K-кол-во символов

2.2.2.3. i-информационный вес одного символа

3. Формула Шеннона

3.1. Pi-вероятность i-го события

3.1.1. Pi=m/n

3.1.1.1. m-Число элементарных событий, благоприятствующих этому событию

3.1.1.2. n-общее число событий