Как определить среднее количество информации, передаваемое по двоичному симметричному каналу Как определить среднее количество информации, передаваемое по двоичному симметричному каналу, если известна вероятность ошибки при приеме одиночного двоичного символа?

Предыдущий
вопрос Следующий
вопрос

Среднее количество информации, передаваемое по двоичному симметричному каналу, можно определить с помощью формулы Хартли, которая выглядит следующим образом:

H = -p log2(p) - (1-p) log2(1-p),

где p - вероятность передачи правильного бита, а (1-p) - вероятность передачи неправильного бита.

Для двоичного симметричного канала вероятность ошибки при приеме одиночного двоичного символа равна p, поэтому формула примет вид:

H = -p log2(p) - p log2(p) = -2p * log2(p).

Таким образом, среднее количество информации, передаваемое по двоичному симметричному каналу, выражается через вероятность ошибки при приеме одного двоичного символа и равно -2p * log2(p).