а так как внутренняя сумма не зависит от i, то суммы можно поменять местами
Но поскольку
В рассматриваемом случае, когда элементы изображения взаимно коррелированы,энтропия
Зрительная система человека имеет ряд особенностей - не все детали изображения одинаково воспринимаются зрителем. Детали малого размера, мало контрастные, из-за ограничений со стороны контрастной чувствительности зрения, не видны зрителю на изображении, поэтому без всякого ущерба для качества его воспроизведения могут не передаваться. Благодаря этому цифровой поток, которым передается изображение, может быть сокращен.
Психофизическая избыточность изображений - обусловлена особенностями зрительной системы человека.
Пример: кодирования изображения звездного неба. Пороговый контраст зрения в сильной степени зависит от угловых размеров наблюдаемых объектов. Так, например, если при наблюдении объектов, имеющих большой угловой размер, пороговый контраст составляет около 0,02, то при наблюдении точечных объектов, в нашем примере - звезд, он составляет не более 0,1. Поэтому, передавая изображение пиксел за пикселом, как обычно, можно квантовать яркость звезд всего на 16 уровней, расходуя на представление яркости каждой из них по 4 двоичных единицы, а не по 8. В этом случае благодаря уменьшению затрат двоичных единиц кода на представление яркости звезд имеет место сокращение кодовой последовательности и, следовательно, сжатие данных (изображения), которое в данном случае составляет 2 раза.
Описанный метод кодирования относится к группе методов сжатия данных с потерями информации. Смысл этого термина заключается в том, что после декодирования распределение яркости в восстановленном изображении отличается от того распределения, которое было до его кодирования, т.е. имеет место искажение изображения и соответственно потеря информации. Но следует иметь ввиду, что речь здесь идет о потере информации, которой зрительная система не в состоянии воспользоваться в силу присущих ей ограничений.
На практике при сжатии изображений применяются как методы сжатия данных с потерей информации (обычно эти методы основаны на сокращении не только психофизической избыточности, но статистической), так и методы сжатия данных без потерь информации.
Избыточность изображения обусловлена наличием сильных корреляционных связей между значениями яркости смежных пикселов, кроме того, избыточность обусловлена также тем, что неравномерность распределения плотности вероятности их значений мала. Различие в вероятности появления тех или иных уровней яркости невелико. Сказанное поясняется рис.2.1, на котором приведена плотность вероятности значений яркости в исходном изображении
Рис.2.1.
Первым шагом при сжатии изображений с использованием энтропийного кодирования является декорреляция кодируемой последовательности, при которой устраняются статистические связи между кодируемыми отсчетами и уже затем производится кодирование статистически независимых отсчетов. Простейшим, но не оптимальным способом декорреляции является преобразование последовательности отсчетов кодируемого сигнала, представляющего яркость пикселов изображения
где
Рис.2.2
Рис.2.3
Кодирование длин серий или как его еще называют RLE (Run-Length Encoding) в настоящее время широко применяется при записи графических изображений в файлы либо как самостоятельный метод, либо в составе более сложных алгоритмов кодирования, применяемых в различных форматах графических файлов, например в JPEG. Этот метод применяется также в таких распространенных форматах, как PCX, TIFF и TARGA.
Многие графические изображения, например, чертежи, плакаты и т.п. включают в себя значительные однородные области, имеющие одинаковые яркость и цвет. При разложении таких изображений в растр наличие однородных областей приводит к появлению в строках последовательностей отсчетов, имеющих одни и те же значения, как показано на рис. 2.4. Эта особенность позволяет при их сжатии расходовать меньше двоичных единиц, чем при традиционном методе кодирования, записывая лишь длину серии (число повторений одинаковых отсчетов) и значение яркости, с которого начинается
Рис.2.4.
серия. Так при использовании метода кодирования длин серий для кодирования отсчетов яркости, показанных на рис. 2.4, получим следующую кодовую последовательность:
Определим величину коэффициента сжатия, которое обеспечивается при использовании этого метода. Учитывая, что для записи числа повторений одинаковых отсчетов в последовательности, максимальная протяженность которой равна
Обозначая вероятность нового значения, т.е. вероятность появления последовательности, через
Из этой формулы видно, что коэффициент сжатия сильно зависит от вероятности появления новых значений