Мярка за информация за равновероятни съобщения

Страници за работа

Фрагмент от текста на произведението

1. Ентропията на коя система е по-голяма? Обосновете отговора.

х

х

у

у

2. Ентропията на коя система е по-голяма: монети (2 състояния) или зарове (6 състояния)?

3. Каква е формулата за определяне на мярката за информация за еднакво вероятни съобщения? Запишете формулата и дешифрирайте всички обозначения в нея.

4. Каква формула се използва за определяне на измерването на информацията за не еднакво вероятни съобщения? Запишете формулата и дешифрирайте всички обозначения в нея.

5. Изчислете средната дължина на кодовата дума за C = кода за следните стойности на вероятностите за поява на символи:, .

6. Изградете кодово дърво за еднороден двоичен код с дължина на кодовата дума 3.

7. Запишете формулата за изчисляване на ентропията, дешифрирайте всички обозначения в нея.

8. Каква е минималната дистанция на кода за коригиране на грешки, необходима за коригиране на единични грешки?

9. Минималното кодово разстояние на кода е 3. Колко грешки може да открие този код? Обосновете отговора.

10. Какво е кодовото разстояние между кодовите комбинации 1101 и 0011?

11. Разрешени кодови комбинации 00, 01, 10, 11. Каква е минималната кодова дистанция на кода? Обосновете отговора.

12. Кой от следните кодове е префикс?

---