Теория информации для бакалавров (Павлов Ю.Н., Смирнова Е.В., Тихомирова Е.А.) [2016, Учебное пособие, PDF]

Глава 1. Предмет "Теория информации"
1.1. Что такое информация?
1.2. Понятие об информационных системах
1.3. Понятие "получение информации", примеры источников первичной информации
1.4. Модуляция сигналов
1.5. Выдающиеся ученые, внесшие вклад в развитие науки "Математическая теория информации"
Глава 2. Основы математической теории информации
2.1. Количественная мера информации
2.2. Аксиомы теории информации. Энтропия
2.3. Свойства энтропии
2.4. Единицы энтропии
2.5. Колмогоровская сложность
Глава 3. Энтропия сложных систем
3.1. Понятия об объединении систем
3.2. Объединение взаимно независимых источников информации
3.3. Объединение зависимых источников информации
3.4. Энтропия непрерывных систем
3.5. Энтропия объединения непрерывных систем
Глава 4. Кодирование и передача информации по каналу связи без помех
4.1. Кодирование
4.2. Эффективное кодирование
4.3. Оптимальный код Шеннона-Фано
4.4. Блочное кодирование
4.5. Пропускная способность канала связи без помех
Глава 5. Передача информации по дискретному каналу связи с помехами
5.1. Модель дискретного канала передачи информации с помехами
5.2. Пропускная способность каналов связи с помехами
5.3. Симметричный бинарный канал связи
5.4. Учет распределения
Глава 6. Помехоустойчивое кодирование
6.1. Обнаруживающие и корректирующие коды
6.2. Код с проверкой на четность
6.3. Коды Хэмминга
6.4. Циклические коды
6.5. Избыточность русского языка
Глава 7. Передача информации по непрерывному каналу связи с помехами
7.1. Основы спектрального анализа. Преобразование Фурье
7.2. Теорема Котельникова
7.3. Квантование по уровню
7.4. Пропускная способность непрерывного канала связи с помехами
Глава 8. Приложения теории информации к решению научно-технических задач
8.1. Методы теории информации в радиотелеметрии
8.2. Информационная теория измерений
8.3. Информационные критерии технической диагностики
Приложение. Задачи по прикладной теории информации с решениями