Энтропия неизменна
Согласно Второму закону термодинамики, энтропия в нашей вселенной возрастает. Следовательно, растёт и количество информации. Но как же законы сохранения - ведь получается, что тут они не работают?
Ученые утверждают, что количество (ценность) информации уменьшается, если "кусок" информации подчиняется закономерности. Например, если на картинке есть повторяющийся узор, или крупные области одного цвета (и, впридачу, правильной формы), то такую картинку можно сжать в десятки или сотни раз - это и будет количество содержащейс в изображении информации. Максимально информативны изображения, содержащие хаос, "кашу-малашу", так называемый "белый шум" - такие картинки в принципе несжимаемы.
И вот тут, как мне кажется, зарыта лукавая собака. По-моему, количество информации и там и там - одинаково. Просто для регулярных структур следует учитывать информацию (энергию) необходимую для формулировки закономерностей, а также информационную работу по "выявлению значимой информации": в нашем примере с картинками это - сжатие и последующее восстановление конкретного изображения.
Как-то так.