Ақпаратты өлшеу үшін қандай формулалар қолданылады?

Шеннон энтропиясы 2: h = -Σ(p(i) * log2(p(i)) ), мұндағы p (i) — I таңбасының пайда болу ықтималдығы 2.

Ақпарат саны 2: I = log2 (N), мұнда N — алфавиттегі таңбалар саны 124.

Бір таңбаға орташа ақпарат 2: $I_{avg} = (1 / N) * Σ (p(i)*I(i)),$ мұнда p(i) — $I$ таңбаның пайда болған ықтималары, I(i) — $I$ таңбаның ақпараттық салмағы 2

Хартли формуласы 5: $I = K * X$, мұнда I — ақпарат санын есептеуге арналған формула, K — ақпараттағы символдар санын (қуаттылығын) есептегенде, X — әрбір символдың ақпарат мөлшері 5.