Основные направления теории кодирования

Для начала необходимо разобраться, что такое кодирование и теория кодирования? Кодирование" - одно из наиболее распространенных понятий в современной информатике. Имеются разные толкования:

Кодирование информации — процесс преобразования сигнала из формы, удобной для непосредственного использования информации, в форму, удобную для передачи, хранения или автоматической переработки Кодирование — процесс преобразования знаков в сигналы.

Кодирование [coding] - 1. Представление средствами одного алфавита (кода) букв других алфавитов. 2. Процесс построения кодов, отображающих сообщения заданного вида в слова из символов некоторого алфавита.

Большая советская энциклопедия дает следующее толкование Кодирование — операция отождествления символов или групп символов одного кода с символами или группами символов другого кода. Необходимость К. возникает прежде всего из потребности приспособить форму сообщения к данному каналу связи или какому-либо другому устройству, предназначенному для преобразования или хранению информации. Так, сообщения представленные в виде последовательности букв, например русского языка, и цифр, с помощью телеграфных кодов преобразуются в определённые комбинации посылок тока. При вводе в вычислительные устройства обычно пользуются преобразованием числовых данных из десятичной системы счисления в двоичную и т. д.