Канонический вид матрицы. Приведение к каноническому виду

В общем случае под каналом передачи информации понимают всю совокупность технических средств, обеспечивающих передачу электрических сигналов от источника сообщений к потребителю. При рассмотрении каналов линию связи чаще всего полагают заданной (считается, что все необходимые характеристики линии связи известны) и все задачи анализа и синтеза каналов передачи информации сводятся к анализу и синтезу операторов преобразования сигналов в передатчике, приемнике и других устройствах.

Каналы передачи информации классифицируют по различным признакам: по назначению, по характеру линий связи, по диапазону частот, по характеру сигналов на входе и выходе каналов и т. п. По назначению каналы делятся на телефонные,

телеграфвые, телевизионные, фототелеграфные, звукового вещания, телеметрические, передачи данных и др. В зависимости от того, распространяются ли сигналы в свободном пространстве или по направляющим линиям, различают каналы радиосвязи и каналы проводной связи: воздушные, кабельные, волноводные, световодные и др. По воздушным проводным линиям связи передают сигналы в диапазоне 0-160 кГц. На более высоких частотах возрастает влияние помех, резко увеличивается затухание сигналов, сказывается влияние радиовещательных станций длинноволнового диапазона. Существенный недостаток воздушных проводных линий связи - большая зависимость их характеристик от атмосферных условий. Значительно лучшими характеристиками и большей устойчивостью в работе обладают кабельные линии связи. Они являются основой сетей магистральной дальней связи, по ним передают сигналы в диапазоне частот от 600 кГц до 60 МГц. С дальнейшим увеличением частоты затухание сигналов резко возрастает.

В настоящее время ведутся интенсивные теоретические и экспериментальные работы по исследованию металлических волноводов. Полученные результаты позволяют надеяться, что эти линии связи будут широко использоваться для передачи сигналов в диапазоне 35-80 ГГц (длина волны 8,6-3,75 мм). Перспективен круглый волновод с внутренним диаметром 6 см, по которому молено организовать более 200 000 стандартных телефонных каналов (каналов тональной частоты с эффективно используемой полосой частот от 300 до 3400 Гц) или около 200 телевизионных каналов . Экономические расчеты показывают, что при организации телефонных каналов до 30000 еще целесообразно применять коаксиальный кабель, свыше 30 000 каналов - волновод. Еще большее число стандартных каналов можно организовать, используя оптические системы связи, в которых применяют сигналы в полосе частот 600-900 ТГц (0,5-0,3 мкм). Используя закрытые направляющие системы, которые получили название световодов, можно осуществить устойчивую связь на большие расстояния. Большой практический интерес представляют диэлектрические гибкие волоконные световоды.

Наряду с проводными линиями связи широко используют радиолинии различных диапазонов. Эти линии во многих случаях более экономичны, позволяют быстро организовать сверхдальнюю (глобальную) связь без промежуточных станций. Кроме того, и это очень важно, - эти линии являются единственным средством связи с подвижными объектами (воздушными судами, космическими кораблями, морскими судами, включая и подводные лодки, автомобилями и пр.).

Наибольшее распространение для передачи многоканальных сообщений получили наземные радиорелейные линии, работающие в метровом, дециметровом и сантиметровом диапазонах волн на частотах от 60 МГц до 15 ГГц. На этих частотах обеспечивается широкая полоса тракта передачи, необходимая для многоканальной телефонной и телевизионной связи, мал уровень

атмосферных и промышленных помех. Все это обеспечивает высокую помехоустойчивость передачи информации.

Разновидностью радиорелейных линий являются тропосферные линии, в которых принимаются сигналы, отраженные от неоднородностей тропосферы. Использование дальнего тропосферного распространения радиоволн позволяет создать линии дальней радиосвязи с расстояниями между ретрансляционными станциями в несколько сотен километров. Эти линии работают чаще всего в диапазоне частот от 0,5 до 6 ГГц.

Перспективны спутниковые линии связи. По принципу работы они представляют разновидность радиорелейных линий, ретрансляторы которых находятся на искусственных спутниках Земли. Существенным преимуществом спутниковых линий является большая дальность связи, которая при одном спутнике (ретрансляторе) составляет около 10 000 км. При использовании системы спутников можно организовать глобальную связь - между любыми пунктами Земли. Спутниковые линии связи работают в диапазоне частот 4-6 ГГц. В настоящее время отведено шесть новых частотных диапазонов от 11 до 250 ГГц, освоение которых позволит существенно повысить качественные показатели спутниковой связи. Спутниковые системы связи, особенно с цифровыми методами передачи сигналов, перспективны и в гражданской авиации, особенно с выходом на воздушные трассы сверхзвуковых пассажирских судов.

Как видим, для современных методов и средств передачи информации характерен переход на все более высокие частоты. Это обусловлено следующими основными причинами: применение высоких частот позволяет получить остронаправленное излучение при малых размерах антенн; в высокочастотных диапазонах меньшее влияние оказывают атмосферные и промышленные помехи; чем выше несущая частота, тем большее число каналов можно организовать без взаимных помех; только в высокочастотных диапазонах, начиная с метрового, можно организовать большое число широкополосных каналов, таких, например, как каналы видеотелефонной связи и телевизионные каналы.

Одной из основных задач анализа каналов передачи информации является анализ искажений передаваемых по ним сигналов. Более всего на качестве передачи информации сказываются искажения формы сигналов, определяемые реальными амплитудными и частотными характеристиками каналов, а также многолучевым распространением радиоволн. Математические модели для полного анализа искажений в реальных каналах достаточно сложны.

Для общего приближенного анализа искажений канал рассматривают как эквивалентный четырехполюсник, работа которого описывается определенным оператором Если входной сигнал то сигнал на выходе канала Для более детального анализа искажений канал связи представляют как последовательное соединение линейного, в общем случае инерционного, и нелинейного неинерционного четырехполюсников, в

которых и происходят линейные и нелинейные искажения сигналов. Если в состав канала входят модулятор и демодулятор или учитываются замирания сигналов, то к этим четырехполюсникам последовательно включают еще и четырехполюсник с переменными параметрами. Если требуется анализировать работу отдельных устройств канала, число последовательно соединенных четырехполюсников увеличивают. Например, для анализа радиоканала передачи дискретных сообщений часто используют структурную схему, представленную на рис. 1,1.

Рис. 1.1. Структурная схема канала передачи информации

Канал рассматривается как последовательное соединение кодера, первого и второго модулятора, линии связи, первого и второго демодулятора и декодера. Использование модели канала в виде эквивалентного четырехполюсника (или последовательного соединения четырехполюсников) позволяет решить ряд задач анализа и синтеза каналов методами теории радиотехнических цепей и статистической радиотехники .

По характеру сигналов на входе и выходе каналов различают дискретные, непрерывные, дискретно-непрерывные и непрерывно-дискретные каналы. Дискретным каналом, например в схеме рис. 1.1, является канал, рассматриваемый от входа кодера до выхода декодера или от входа первого модулятора до выхода второго демодулятора. Если рассматривать совокупность технических средств от выхода первого или второго модулятора до входа первого или второго демодулятора, то в любой системе передачи информации эта совокупность образует непрерывный канал. Примером дискретно-непрерывного канала служит совокупность технических средств от входа первого модулятора до входа первого или второго демодулятора. Непрерывно-дискретный канал образуется, если анализировать в схеме рис. 1.1 прохождение сигналов от выхода первого или второго модулятора до выхода второго демодулятора или в общем случае до выхода декодера. Таким образом, на основе непрерывного канала (на рис. 1.1 он показан штриховой

линией) образуются каналы всех других видов. Поэтому изучению непрерывных каналов уделяют большое внимание.

Математические модели для исследования каналов строят с учетом рассмотренной классификации. По существу разработка модели сводится к определению структуры и параметров эквивалентного оператора преобразования сигнала в канале. В зависимости от типа этого оператора различают каналы: линейные, нелинейные, инерционные, безынерционные, стационарные, нестационарные, детерминированные, вероятностные и др. Наиболее изучены линейные инерционные каналы с постоянными параметрами.

Если передаваемый сигнал рассматривается как случайный процесс, что значительно приближает модели сигналов к реальным, то при анализе прохождения сигнала через канал необходимо анализировать прохождение случайных процессов через четырехполюсники, описываемые различными операторами. Такие задачи решают в статистической радиотехнике , результаты решения этих задач находят непосредственное применение при анализе каналов передачи информации.

Как и для сигналов, для каналов удобно использовать такие физические характеристики, как время занятости канала полоса пропускания (прозрачности) канала, диапазон допустимых уровней сигналов при передаче по каналу, база канала емкость канала

Каналом связи называют совокупность технических средств и физической среды, способной к передаче посылаемых сигналов, которые обеспечивают передачу сообщений от источника информации к получателю.

Каналы принято делить на непрерывные и дискретные.

В наиболее общем случае всякий дискретный канал включает в себя непрерывный как составную часть.

Если влиянием мешающих факторов на передачу сообщений в канале можно пренебречь, то такой идеализированный канал называется каналом без помех.

В таком канале каждому сообщению на входе однозначно соответствует определенное сообщение на выходе и наоборот. Если влиянием помех в канале пренебречь нельзя, то при анализе особенностей передачи сообщений по такому каналу используют модели, характеризующие работу канала при наличии помех.

В зависимости от конкретных свойств реальных каналов используют различные типы моделей. Канал, в котором вероятности отождествления первого сигнала со вторым и второго с первым одинаковы, называется симметричным каналом.

Канал, на выходе которого алфавит сигнала отключается от алфавита сигнала на входе, называется каналом со стиранием.

Канал со стиранием и трансляцией Канал со стиранием

Канал передачи сообщений к получателю дополнительным обратным каналом, служащим для повышения достоверности передачи, называется каналом с обратной связью.

Канал связи считается заданным, если известны данные о сообщениях на его входе, а также ограничения, которые накладываются на входные сообщения физическими характеристиками каналов.

Для характеристики каналов связи используют два понятия скорости передачи:

а) Техническая скорость передачи, характеризуется числом элементарных сигналов, передаваемых по каналу в единицу времени. Она зависит от свойств линий связи, а быстродействие от аппаратуры каналов. .

б) Информационная скорость, которая определяется средним количеством информации, передающаяся в единицу времени. Эта скорость зависит как от характеристик данного канала, так и от характеристик используемых сигналов.

Пропускной способностью канала называется максимальная скорость передачи информации по этому каналу, достигаемая при самых совершенных способах передачи и приемов. Пропускная способность, как и скорость передачи информации, вообще измеряется количеством передаваемой информации в единицу времени.

15. Согласование физических характеристик канала связи и сигналов

Каждый конкретный канал связи обладает физическими параметрами, определяющими возможности передачи по этому каналу тех или иных сигналов, независимо от назначения, любой канал можно охарактеризовать тремя основными параметрами:

1) - время доступа каналов, [c];

2)
- полоса пропускания канала связи, [Гц];

3)
- допустимое превышение сигнала над помехами (шумами).

- объем канала связи.

Чтобы оценить возможность передачи данного сигнала по конкретному каналу нужно соотнести характеристики канала с соответствующими характеристиками сигнала:

1) - длительность сигнала;

2) - полоса частот (ширина спектра) сигнала;

3)
- уровень превышения сигнала над помехами.

- объем сигнала.

Схема передачи информации. Канал передачи информации. Скорость передачи информации.

Существуют три вида информационных процессов: хранение, передача, обработка.

Хранение информации:

· Носители информации.

· Виды памяти.

· Хранилища информации.

· Основные свойства хранилищ информации.

С хранением информации связаны следующие понятия: носитель информации (память), внутренняя память, внешняя память, хранилище информации.

Носитель информации – это физическая среда, непосредственно хранящая информацию. Память человека можно назвать оперативной памятью. Заученные знания воспроизводятся человеком мгновенно. Собственную память мы еще можем назвать внутренней памятью, поскольку ее носитель – мозг – находится внутри нас.

Все прочие виды носителей информации можно назвать внешними (по отношению к человеку): дерево, папирус, бумага и т.д. Хранилище информации - это определенным образом организованная информация на внешних носителях, предназначенная для длительного хранения и постоянного использования (например, архивы документов, библиотеки, картотеки). Основной информационной единицей хранилища является определенный физический документ: анкета, книга и др. Под организацией хранилища понимается наличие определенной структуры, т.е. упорядоченность, классификация хранимых документов для удобства работы с ними. Основные свойства хранилища информации: объем хранимой информации, надежность хранения, время доступа (т.е. время поиска нужных сведений), наличие защиты информации.

Информацию, хранимую на устройствах компьютерной памяти, принято называть данными. Организованные хранилища данных на устройствах внешней памяти компьютера принято называть базами и банками данных.

Обработка информации:

· Общая схема процесса обработки информации.

· Постановка задачи обработки.

· Исполнитель обработки.

· Алгоритм обработки.

· Типовые задачи обработки информации.

Схема обработки информации:

Исходная информация – исполнитель обработки – итоговая информация.

В процессе обработки информации решается некоторая информационная задача, которая предварительно может быть поставлена в традиционной форме: дан некоторый набор исходных данных, требуется получить некоторые результаты. Сам процесс перехода от исходных данных к результату и есть процесс обработки. Объект или субъект, осуществляющий обработку, называют исполнителем обработки.

Для успешного выполнения обработки информации исполнителю (человеку или устройству) должен быть известен алгоритм обработки, т.е. последовательность действий, которую нужно выполнить, чтобы достичь нужного результата.

Различают два типа обработки информации. Первый тип обработки: обработка, связанная с получением новой информации, нового содержания знаний (решение математических задач, анализ ситуации и др.). Второй тип обработки: обработка, связанная с изменением формы, но не изменяющая содержания (например, перевод текста с одного языка на другой).

Важным видом обработки информации является кодирование – преобразование информации в символьную форму, удобную для ее хранения, передачи, обработки. Кодирование активно используется в технических средствах работы с информацией (телеграф, радио, компьютеры). Другой вид обработки информации – структурирование данных (внесение определенного порядка в хранилище информации, классификация, каталогизация данных).

Ещё один вид обработки информации – поиск в некотором хранилище информации нужных данных, удовлетворяющих определенным условиям поиска (запросу). Алгоритм поиска зависит от способа организации информации.

Передача информации:

· Источник и приемник информации.

· Информационные каналы.

· Роль органов чувств в процессе восприятия информации человеком.

· Структура технических систем связи.

· Что такое кодирование и декодирование.

· Понятие шума; приемы защиты от шума.

· Скорость передачи информации и пропускная способность канала.

Схема передачи информации:

Источник информации – информационный канал – приемник информации.

Информация представляется и передается в форме последовательности сигналов, символов. От источника к приёмнику сообщение передается через некоторую материальную среду. Если в процессе передачи используются технические средства связи, то их называют каналами передачи информации (информационными каналами). К ним относятся телефон, радио, ТВ. Органы чувств человека исполняют роль биологических информационных каналов.

Процесс передачи информации по техническим каналам связи проходит по следующей схеме (по Шеннону):

Термином «шум» называют разного рода помехи, искажающие передаваемый сигнал и приводящие к потере информации. Такие помехи, прежде всего, возникают по техническим причинам: плохое качество линий связи, незащищенность друг от друга различных потоков информации, передаваемой по одним и тем же каналам. Для защиты от шума применяются разные способы, например, применение разного рода фильтров, отделяющих полезный сигнал от шума.

Клодом Шенноном была разработана специальная теория кодирования, дающая методы борьбы с шумом. Одна из важных идей этой теории состоит в том, что передаваемый по линии связи код должен быть избыточным. За счет этого потеря какой-то части информации при передаче может быть компенсирована. Однако нельзя делать избыточность слишком большой. Это приведёт к задержкам и подорожанию связи.

При обсуждении темы об измерении скорости передачи информации можно привлечь прием аналогии. Аналог – процесс перекачки воды по водопроводным трубам. Здесь каналом передачи воды являются трубы. Интенсивность (скорость) этого процесса характеризуется расходом воды, т.е. количеством литров, перекачиваемых за единицу времени. В процессе передачи информации каналами являются технические линии связи. По аналогии с водопроводом можно говорить об информационном потоке, передаваемом по каналам. Скорость передачи информации – это информационный объем сообщения, передаваемого в единицу времени. Поэтому единицы измерения скорости информационного потока: бит/с, байт/с и др. информационный процесс передача канал

Еще одно понятие – пропускная способность информационных каналов – тоже может быть объяснено с помощью «водопроводной» аналогии. Увеличить расход воды через трубы можно путем увеличения давления. Но этот путь не бесконечен. При слишком большом давлении трубу может разорвать. Поэтому предельный расход воды, который можно назвать пропускной способностью водопровода. Аналогичный предел скорости передачи данных имеют и технические линии информационной связи. Причины этому также носят физический характер.

1. Классификация и характеристики канала связи
Канал связи – это совокупность средств, предназначенных для передачи сигналов (сообщений).
Для анализа информационных процессов в канале связи можно использовать его обобщенную схему, приведенную на рис. 1.

На рис. 1 приняты следующие обозначения: X, Y, Z, W – сигналы, сообщения; f – помеха; ЛС – линия связи;ИИ, ПИ – источник и приемник информации; П – преобразователи (кодирование, модуляция, декодирование, демодуляция).
Существуют различные типы каналов, которые можно классифицировать по различным признакам:
1. По типу линий связи: проводные; кабельные; оптико-волоконные;
линии электропередачи; радиоканалы и т.д.
2. По характеру сигналов: непрерывные; дискретные; дискретно-непрерывные (сигналы на входе системы дискретные, а на выходе непрерывные, и наоборот).
3. По помехозащищенности: каналы без помех; с помехами.
Каналы связи характеризуются:
1. Емкость канала определяется как произведениевремени использования канала T к, ширины спектра частот, пропускаемых каналом F к и динамического диапазона D к . , который характеризует способность канала передавать различные уровни сигналов

V к = T к F к D к. (1)
Условие согласования сигнала с каналом:
V c £ V k ; T c £ T k ; F c £ F k ; V c £ V k ; D c £ D k .
2.Скорость передачи информации – среднее количество информации, передаваемое в единицу времени.
3.
4. Избыточность – обеспечивает достоверность передаваемой информации (R = 0¸1).
Одной из задач теории информации является определение зависимости скорости передачи информации и пропускной способности канала связи от параметров канала и характеристик сигналов и помех.
Канал связи образно можно сравнивать с дорогами. Узкие дороги – малая пропускная способность, но дешево. Широкие дороги – хорошая пропускная способность, но дорого. Пропускная способность определяется самым «узким» местом.
Скорость передачи данных в значительной мере зависит от передающей среды в каналах связи, в качестве которых используются различные типы линий связи.
Проводные:
1. Проводные – витая пара (что частично подавляет электромагнитное излучение других источников). Скорость передачи до 1 Мбит/с. Используется в телефонных сетях и для передачи данных.
2. Коаксиальный кабель. Скорость передачи 10–100 Мбит/с – используется в локальных сетях, кабельном телевидении и т.д.
3. Оптико-волоконная. Скорость передачи 1 Гбит/с.
В средах 1–3 затухание в дБ линейно зависит от расстояния, т.е. мощность падает по экспоненте. Поэтому через определенное расстояние необходимо ставить регенераторы (усилители).
Радиолинии:
1. Радиоканал. Скорость передачи 100–400 Кбит/с. Использует радиочастоты до 1000 МГц. До 30 МГц за счет отражения от ионосферы возможно распространение электромагнитных волн за пределы прямой видимости. Но этот диапазон сильно зашумлен (например, любительской радиосвязью). От 30 до 1000 МГц – ионосфера прозрачна и необходима прямая видимость. Антенны устанавливаются на высоте (иногда устанавливаются регенераторы). Используются в радио и телевидении.
2. Микроволновые линии. Скорости передачи до 1 Гбит/с. Используют радиочастоты выше 1000 МГц. При этом необходима прямая видимость и остронаправленные параболические антенны. Расстояние между регенераторами 10–200 км. Используются для телефонной связи, телевидения и передачи данных.
3. Спутниковая связь . Используются микроволновые частоты, а спутник служит регенератором (причем для многих станций). Характеристики те же, что у микроволновых линий.
2. Пропускная способность дискретного канала связи
Дискретный канал представляет собой совокупность средств, предназначенных для передачи дискретных сигналов .
Пропускная способность канала связи – наибольшая теоретически достижимая скорость передачи информации при условии, что погрешность не превосходит заданной величины.Скорость передачи информации – среднее количество информации, передаваемое в единицу времени. Определим выражения для расчета скорости передачи информации и пропускной способности дискретного канала связи.
При передаче каждого символа в среднем по каналу связи проходит количество информации, определяемое по формуле
I (Y, X) = I (X, Y) = H(X) – H (X/Y) = H(Y) – H (Y/X) , (2)
где: I (Y, X) – взаимная информация, т.е.количество информации, содержащееся в Y относительно X ; H(X) – энтропия источника сообщений; H (X/Y) – условная энтропия, определяющая потерю информации на один символ, связанную с наличием помех и искажений.
При передаче сообщения X T длительности T, состоящего из n элементарных символов, среднее количество передаваемой информации с учетом симметрии взаимного количества информации равно:
I(Y T , X T) = H(X T) – H(X T /Y T) = H(Y T) – H(Y T /X T) = n . (4)
Скорость передачи информации зависит от статистических свойств источника, метода кодирования и свойств канала.
Пропускная способность дискретного канала связи
. (5)
Максимально-возможное значение, т.е. максимум функционала ищется на всем множестве функций распределения вероятности p(x) .
Пропускная способность зависит от технических характеристик канала (быстродействия аппаратуры, вида модуляции, уровня помех и искажений и т.д.). Единицами измерения пропускной способности канала являются: , , , .
2.1 Дискретный канал связи без помех
Если помехи в канале связи отсутствуют, то входные и выходные сигналы канала связаны однозначной, функциональной зависимостью.
При этом условная энтропия равна нулю, а безусловные энтропии источника и приемника равны, т.е. среднее количество информации в принятом символе относительно переданного равно
I (X, Y) = H(X) = H(Y); H (X/Y) = 0.
Если Х Т – количество символов за время T , то скорость передачи информации для дискретного канала связи без помех равна
(6)
где V = 1/ – средняя скорость передачи одного символа.
Пропускная способность для дискретного канала связи без помех
(7)
Т.к. максимальная энтропия соответствует для равновероятных символов, то пропускная способность для равномерного распределения и статистической независимости передаваемых символов равна:
. (8)
Первая теорема Шеннона для канала:Если поток информации, вырабатываемый источником, достаточно близок к пропускной способности канала связи, т.е.
, где - сколь угодно малая величина,
то всегда можно найти такой способ кодирования, который обеспечит передачу всех сообщений источника, причем скорость передачи информации будет весьма близкой к пропускной способности канала.
Теорема не отвечает на вопрос, каким образом осуществлять кодирование.
Пример 1. Источник вырабатывает 3 сообщения с вероятностями:
p 1 = 0,1; p 2 = 0,2 и p 3 = 0,7.
Сообщения независимы и передаются равномерным двоичным кодом (m = 2 ) с длительностью символов, равной 1 мс. Определить скорость передачи информации по каналу связи без помех.
Решение: Энтропия источника равна

[бит/с].
Для передачи 3 сообщений равномерным кодом необходимо два разряда, при этом длительность кодовой комбинации равна 2t.
Средняя скорость передачи сигнала
V =1/2 t = 500 .
Скорость передачи информации
C = vH = 500×1,16 = 580 [бит/с].
2.2 Дискретный канал связи с помехами
Мы будем рассматривать дискретные каналы связи без памяти.
Каналом без памяти называется канал, в котором на каждый передаваемый символ сигнала, помехи воздействуют, не зависимо от того, какие сигналы передавались ранее. То есть помехи не создают дополнительные коррелятивные связи между символами. Название «без памяти» означает, что при очередной передаче канал как бы не помнит результатов предыдущих передач.
При наличии помехи среднее количество информации в принятом символе сообщении – Y , относительно переданного – X равно:
.
Для символа сообщения X T длительности T, состоящегоиз n элементарных символов среднее количество информации в принятом символе сообщении – Y T относительно переданного – X T равно:
I(Y T , X T) = H(X T) – H(X T /Y T) = H(Y T) – H(Y T /X T) = n = 2320 бит/с
Пропускная способность непрерывного канала с помехами определяется по формуле

=2322 бит/с.
Докажем, что информационная емкость непрерывного канала без памяти с аддитивным гауссовым шумом при ограничении на пиковую мощность не больше информационной емкости такого же канала при той же величине ограничения на среднюю мощность.
Математическое ожидание для симметричного равномерного распределения

Средний квадрат для симметричного равномерного распределения

Дисперсия для симметричного равномерного распределения

При этом, для равномерно-распределенного процесса .
Дифференциальная энтропия сигнала с равномерным распределением
.
Разность дифференциальных энтропий нормального и равномерно распределенного процесса не зависит от величины дисперсии
= 0,3 бит/отсч.
Таким образом, пропускная способность и емкость канала связи для процесса с нормальным распределением выше, чем для равномерного.
Определим емкость (объем) канала связи
V k = T k C k = 10×60×2322 = 1,3932 Мбит.
Определим количество информации, которое может быть передано за 10 минут работы канала
10× 60× 2322=1,3932 Мбит.
Задачи

1. В канал связи передаются сообщения, составленные из алфавита x 1, x 2 и x 3 с вероятностями p(x 1)=0,2;p(x 2) =0,3 и p(x 3)=0,5 .
Канальная матрица имеет вид:
при этом .
Вычислить:
1. Энтропию источника информации H(X) и приемника H(Y) .
2. Общую и условную энтропию H (Y/X).
3. Потери информации в канале при передаче к символов (к = 100 ).
4. Количество принятой информации при передаче к символов.
5. Скорость передачи информации, если время передачи одного символа t = 0,01 мс .
2. По каналу связи передаются символы алфавита x 1 , x 2 , x 3 и x 4 с вероятностями . Определить количество информации принятой при передаче 300 символов, если влияние помех описывается канальной матрицей:
.
3. Определить потери информации в канале связи при передаче равновероятных символов алфавита, если канальная матрица имеет вид
.
t = 0,001 сек.
4.Определить потери информации при передаче 1000 символов алфавита источника x 1 , x 2 и x 3 с вероятностями p =0,2; p =0,1 и p()=0,7 , если влияние помех в канале описывается канальной матрицей:
.
5. Определить количество принятой информации при передаче 600 символов, если вероятности появления символов на выходе источника X равны: а влияние помех при передаче описывается канальной матрицей:
.
6. В канал связи передаются сообщения, состоящие из символов алфавита , при этом вероятности появления символов алфавита равны:
Канал связи описан следующей канальной матрицей:
.
Определить скорость передачи информации, если время передачи одного символа мс .
7.По каналу связи передаются сигналы x 1 , x 2 и x 3 с вероятностями p =0,2; p =0,1 и p()=0,7. Влияние помех в канале описывается канальной матрицей:
.
Определить общую условную энтропию и долю потерь информации, которая приходится на сигнал x 1 (частную условную энтропию).
8. По каналу связи передаются символы алфавита x 1 , x 2 , x 3 и x 4 с вероятностями .
Помехи в канале заданы канальной матрицей
.
Определить пропускную способность канала связи, если время передачи одного символа t = 0,01 сек.
Определить количество принятой информации при передаче 500 символов, если вероятности появления символов на входе приемника Y равны: , а влияние помех при передаче описывается канальной матрицей:
.

Пропускная способность непрерывного канала связи
(14)
Для дискретного канала связи максимальное значение скорости передачи соответствует равновероятным символам алфавита. Для непрерывного канала связи, когда заданной является средняя мощность сигнала, максимальная скорость обеспечивается при использовании нормальных центрированных случайных сигнала.
Если сигнал центрированный (m x = 0 ) т.е. без постоянной составляющей при этом мощность покоя равна нулю (P 0 = 0 ). Условие центрированности обеспечивает максимум дисперсии при заданной средней мощности сигнала
Если сигнал имеет нормальное распределение, то априорная дифференциальная энтропия каждого отсчета максимальна.
Поэтому при расчете пропускной способности непрерывного канала считаем, что по каналу передается непрерывный сигнал с ограниченной средней мощностью – P c и аддитивная помеха (y = x+f ) также с ограниченной средней мощностью – P n типа белого (гауссова) шума.