정보량의 최소단위 bit

 

bit

정보의 단위로서 실현 가능성이 같은 2개의 대안 중 하나가 명시되었을 때에 얻는 정보량

 

 

I(p) = -log₂(p)

이 때,

I(p): 확률 p인 사건이 발생했을 때 얻는 정보량(bit단위)

p: 사건이 발생할 확률