АҚПАРАТ КӨЛЕМІН АНЫҚТАУ Хартли және Шеннон формулалары.   АҚПАРАТ КӨЛЕМІН АНЫҚТАУ АҚПАРАТТЫ ӨЛШЕУ БІРЛІКТЕРІ. САНАУ ЖҮЙЕЛЕРІ; САНДАРДЫ БІР САНАУ ЖҮЙЕСІНЕН ЕКІНШІГЕ АУДАРУ. ЕСЕПТІ ШЫҒАРУ МЫСАЛДАРЫ

Клод Шеннон, американ ғалымы, ақпаратты біздің біліміміздің бірдеңе туралы білместігіміздің түсуі ретінде қарастырады.

Американ инженері Р. Хартли 1928 жылы ақпаратты алу процесін N тең ықтималды хабарламалардан тұратын алдын ала берілген шекті көпшеден бір хабарламаны таңдау деп қарастырды, ал таңдалған хабарламадағы ақпарат I көлемін N екілік логарифмі ретінде анықтаған.

Хартли формуласы:

I = log2N

Мысалы, бірден жүзге дейінгі сандар жиынтығынан бір санды табу керек. Хартли формуласы бойынша осы үшін ақпараттың қандай көлемі қажет екенін анықтауға болады: I=log2100>6,644. Яғни, дұрыс табылған сан туралы ақпаратта шамамен 6,644 ақпарат бірлігі бар.