Question

Определить количество информации и энтропию сообщения из 5 букв, если число букв в алфавите 32 и все сообщения равно вероятные. Привести формулу и решение*

Answer 1

I - - кол-во информации в сообщении
К - кол-во символов в сообщении
i - кол-во информации, несомой одним символом
N - мощность алфавита
I = К * i
N = 2^i
32 = 2^5
I = 5 * 5 = 25 бит
Ответ: кол-во информации - 25 бит
Извините, что такое энтропия слышу впервые...