Введение в теорию информации.

Основы теории информации
Information theory basics
Теория информации как наука
• Теория информации – раздел математики,
изучает процессы хранения,
преобразования и передачи информации
• Эта теория устанавливает границы
возможностей систем передачи информации
Информация
• В своём первом определении
– Информация – сведения, передаваемые от
человека к человеку устно, письменно или с
помощью условных сигналов
• В настоящее время:
– Информация – сведения об окружающем
мире, о протекающих в нём процессах,
которые воспринимают живые организмы,
управляющие машины и другие
информационные системы
Информация
• Её главное свойство:
мера определённости сообщения
Информация уничтожает незнание о чёмлибо, уничтожает неопределённость
Передача информационного
сообщения
?
!!!
Источник
Приёмник
source
target
Свойства информации
• Качественные (можно выяснить, есть ли у
информации некоторое качество или нет)
– Ценность
– Актуальность
– Достоверность
• Количественные (можно измерить)
– Полнота
Количество информации
• Единицы измерения: бит, байт, Кбайт,
Мбайт, Гбайт, …
• 1 байт = 8 бит
• 1Кбайт = 1024 байта = 2^10 байта
• 1Мбайт = 1024 Кбайт = 2^20 байта
Контрольные вопросы
Questions for control
Какие учёные сделали важный вклад в становление и
развитие теории информации?
(What scientists made important contributions for
establishment and development of theory of information?)
Что значит, что в информационном сообщении передаётся
1 бит информации? 1 байт информации?
(What does it mean, if in an information message transferred
was 1 bit of information? 1 byte of information?)
Что такое избыточная информация? Неполная
информация?
(What is excessive information? Incomplete information?)
Сколько байт помещается на 1 листе бумаги формата А4?
(How many bytes can be placed on 1 A4 sheet of paper?)