16356 Теория информации

Контрольная работа № 1,2,3 По каждому заданию необходим вывод Пояснения к лабораторной работе № 2 В первом задании матрица совместных вероятностей размером 10 х 10 задается самостоятельно. Необходимо помнить, что сумма всех вероятностей в матрице равна 1. Далее расчет частных условных энтропий и полной условной энтропии можно сделать по примеру в лекциях (раздел полная условная энтропия). Во втором задании берете ваш текст и делите его на двухбуквенные сочетания. Например: Исходный текст: Теория информации Двухбуквенные сочетания: Те_ор_ия_ и_нф_ор_ма_ци_и Вычисляете совместную вероятность для каждого двухбуквенного сочетания и строите таблицу совместных вероятностей. По данной таблице вычисляете энтропию сложной системы. Затем переходите к канальной матрице (переход как в первом задании (пример в лекциях)) и вычисляете полную условную энтропию В лабораторной работе №3 избыточность считаете по данным полученным в ЛР1 ЛР2. Для кодирования и декодирования текста необходимо написать программу. Программу необходимо представить вместе с отчетом. В отчете должны быть скриншоты работы программы, листинг и блок-схема.