Клод Шеннон и происхождение теории информации

Клод Шеннон: человек, который построил теорию информации из чужих кирпичей Слово «бит» придумал не Шеннон, а его коллега по Bell Labs Джон Тьюки, просто сократив в служебной записке 1947 года громоздкое «binary digit». Булеву алгебру за сто лет до этого вывел англичанин Джордж Буль, и 80 лет её считали красивой, но бесполезной философской игрушкой, пока Шеннон не увидел, что она идеально описывает работу электромеханических реле. Термин «энтропия» ему, по легенде, подсказал Джон фон Нейман — просто потому, что этим словом никто толком не умеет пользоваться правильно. Посмотрим, что из теории информации на самом деле принадлежит самому Шеннону.