Question

1.вероятность первого события составляет 0.5, а второго и третьего 0.25. какое количество информации мы получим после реализации одного из них? 2. какое количество информации получит второй игрок в игре "Угадай число" при оптимальной стратегии, если первый игрок загадал число: от 1 до 64? от 1 до 128?

Answer 1

1)
p1=0,5=1/2
p2=0,25=1/4
p3=0,25=1/4
I =-(log2 1/2)/2 -(log2 1/4)/4 -(log2 1/4)/4=1/2+1/2+1/2=3/2=1,5(бит)
2)
64=2^6 --->  6 бит
128=2^7   ---> 7 бит