Мера неоднородности распределения материи и энергии в пространстве и времени, мера изменений, которыми сопровождаются все протекающие в мире процессы (определение В.М.Глушкова).

Количество информации (по Шеннону), содержащееся в сообщении, есть вероятность появления этого сообщения, умноженная на двоичный логарифм 'этой вероятности

В теории связи энтропия используется как мера неопределенности ожидаемого сообщения, т.е. энтропия источника информации с независимыми сообщениями есть среднее арифметическое количеств информации сообщений

Множество символов (алфавит) и правил их использования для представления сообщений. Часто кодами называют также сами сообщения или их фрагменты, представленные с помощью этих алфавита и правил

Представление некоторого символа сообщения с помощью символов кода

Код, в котором все кодовые слова имеют одинаковую длину

Единица количества информации. Равна количеству информации, содержащемуся в одном разряде двоичного кода при равной вероятности появления нуля или единицы

Код из восьми бит

Преобразование сообщения или непрерывного сигнала в код при передаче, хранении или обработке информации. При преобразовании в дискретный код непрерывных сигналов необходимым этапом является квантование сигналов

Процедура, обратная кодированию

Код, используемый для контроля правильности переданной информации

Код, в котором кодовые слова не зависят от последующих символов сообщения, т.е. могут декодироваться сразу после их получения

Первая теорема Шеннона утверждает, что при кодировании средняя длина кодовых слов может достигать значения, равного энтропии источника сообщений

Если слова языка расположены в порядке убывания их частотности, то вероятность использования слова, занимающего в списке слов позицию m равна A/m, где A- константа, зависящая от числа активных слов в языке. Шеннон использовал для английского языка A = 0,02 при числе активных слов 12366

Отношение пропускной способности канала связи к скорости неискаженной передачи символов алфавита передаваемого сообщения должно быть больше или равно энтропии передачи одного символа.

Формула, устанавливающая взаиомсвязь между информационной скоростью и полосой пропускания канала связи

Контрольный код, определяемый суммированием всех кодов пакета с переносом из старшего разряда в младший

Код, обычно используемый в качестве контрольного кода (в дуплексных каналах)

Контрольный код, позволяющий обнаруживать двукратные и исправлять одиночные ошибки, допущенные при передаче данных

Расстояние между словами, равное числу позиций (разрядов), в которых слова имеют неодинаковые символы

Представление сообщения в виде кода с уменьшенным числом символов за счет уменьшения избыточности или за счет потери малосущественной информации

Устройство или программа , выполняющее операции кодирования и декодирования информации

Устройство (аппаратное или программное), осуществляющее декодирование

Коэффициент, характеризующий степень сжатия данных

Статистический метод сжатия, основанный на кодировании часто повторяющихся символов короткими цепочками битов, а редко встречающихся символов — более длинными цепочками

Метод сжатия, основанный на исключении из передаваемых видеоданных малосущественной информации

Метод сжатия, в котором цепочка из одинаковых символов представляется символом и значением длины цепочки

Группа экспертов по движущимся изображениям

Стандарт ISO/IEC, разработанный MPEG, посвященный сжатию движущихся изображений

Метод предсказывающего кодирования изображений для сжатия данных о движущихся объектах вместе со звуком, используемый в стандартах MPEG

Кодирование, основанное на передаче разности чисел, представляющих соседние отсчеты (значения амплитуд) измеряемой величины

Метод (алгоритм) сжатия информации, предложенный Лемпелем и Зивом

Одна из реализаций разностного кодирования

Кодирование информации, основанное на выделении фракталов (самоподобных элементов)

Математическая функция, позволяющая анализировать различные частотные компоненты данных

Разновидность время-частотного представления функций, основанная на понятии вейвлета

Стандартный способ кодирования цифр, букв и вспомогательных символов в виде однобайтового двоичного кода

Стандартный способ кодирования различных символов в виде двухбайтового двоичного кода

Один из популярных форматов представления сжатой графической информации

Графический формат, спроектированный с целью замены устаревшего формата GIF

Один из форматов представления звуковой информации

Формат, используемый для представления информации в программе Adobe Acrobat

Формат, используемый для представления информации, сжатой по методу JPEG