Теория информации - Механико-математический факультет БГУ

Министерство образования Республики Беларусь
Белорусский государственный университет
Механико-математический факультет
Кафедра математических методов теории управления
УТВЕРЖДАЮ
Проректор по учебной работе
________________________
Рег.№ __________________
«____» ______________ 2007 г.
Базовая учебная программа дисциплины
«Теория информации»
для студентов специальности 1-31 03 01-03 «Математика.
Экономическая деятельность»
Минск
2007
Автор: экономист-аналитик группы компаний ALUTECH, кандидат
физико-математических наук Дмитрий Михайлович Зеленяк.
Рецензент: (пример: заведующий отделом нелинейного и стохастического
анализа Института математики НАН Беларуси, доктор физикоматематических наук, профессор, член корреспондент НАН Беларуси
Валентин Викентьевич Гороховик)
Одобрена на заседании кафедры
математических методов теории управления
протокол № __ от __ ________ 2007 г.
Одобрена на заседании Ученого совета механико-математического
факультета протокол № ___от _________ 2007 г.
Ответственный за редакцию: лаборант 1 квалификационной категории
О.Н. Сороколетова
ПОЯСНИТЕЛЬНАЯ ЗАПИСКА
Теория информации, разработанная в пионерских работах Шеннона, Фэно,
сотрудников
лаборатории
Bell
в
целях
количественной
оценки
информативности сообщений и решения ряда проблем оптимального
хранения и передачи информации получает все большее применение в
экономических науках. В курсе изложены методы расчета неопределенности
(энтропии) и информации, рассмотрены вопросы применения теории к
задачам определения оптимальной частоты налогового инспектирования и
инвестиционному анализу.
УЧЕБНО-ТЕМАТИЧЕСКИЙ ПЛАН
№
Наименование тем и разделов
1
1
2
3
2
8 семестр
Энтропия
Информация
Приложения
Всего за семестр
Всего по курсу
Распределение часов по видам
занятий
Всего Лекции
Лаб.
КС
Р
3
4
5
6
12
14
43
43
26
26
8
8
Тема 1. Энтропия.
Предмет и задачи теории информации. Неопределенность. Энтропия простой системы.
Энтропия сложной системы. Теорема сложения энтропий. Условная энтропия.
Объединение зависимых систем.
Тема 2. Информация.
Количественное определение информации. Полная взаимная информация. Частная
информация. Информация для систем с непрерывным множеством состояний. Задачи
кодирования сообщений. Код Шеннона-Фэно. Передача информации с искажениями.
Пропускная способность канала с помехами.
Тема 2. Приложения.
Задача определения оптимального режима налогового инспектирования. Приложения
теории информации к инвестиционному анализу.
ОСНОВНАЯ И ДОПОЛНИТЕЛЬНАЯ ЛИТЕРАТУРА
Список литературы
Основная литература
1.
Е.С. Вентцель. Теория вероятностей, М.: Высшая школа, 2001.
Дополнительная литература
1.
Журналы “Вопросы экономики”, “Теория вероятностей и приложения”.