1. Становление теории информации

Информация осознана современным обществом как необходимое условие прогресса. Наибольший экономический успех сегодня сопутствует тем предприятиям, которые активно используют современные средства коммуникаций, информационные технологии и их приложения. Новые информационные технологии и связанные с ними прикладные задачи требуют создания новой среды - информационной, а также систем управления информационными ресурсами.

На фундаментальность понятия "информация" указывал еще основоположник кибернетики Норберт Винер. Феномен информации оказался настолько неоднозначным, что по праву считается одной из сложнейших проблем современности. Уже сами попытки подобраться к понятию информации, различные его трактовки в трудах ученых и практиков заставляют задуматься о необычной роли информации в жизни развивающихся систем.

Поскольку понятие информации является наиболее сложным для понимания "информация" имеет различные трактовки в разных предметных областях. Например, информация может пониматься как:

• абстракция, абстрактная модель рассматриваемой системы (в математике);

• сигналы для управления, приспособления рассматриваемой системы (в кибернетике);

• мера хаоса в рассматриваемой системе (в термодинамике);

• вероятность выбора в рассматриваемой системе (в теории вероятностей);

• мера разнообразия в рассматриваемой системе (в биологии) и др.

Первые подходы к осмыслению этой категории сделали основоположники теории информации. Еще в 1927 году Р.В.Л. Хартли отмечал, что количество информации, заключенной в любом сообщении, тесно связано с количеством возможностей, данным сообщением исключающихся. У. Эшби предостерегал против попыток рассматривать информацию как "материальную или индивидуальную вещь». В 1949 году Шеннон и Уивер представили формулу вычисления количества информации, в которой информация возрастала с уменьшением вероятности отдельного сообщения. В 1968 году Урсул указал на то, что информация неоднородна, она обладает качественными характеристиками, и два разных типа информации не могут сравниваться. Каждый уровень природы обладает собственной информацией.

2. Место теории информации в рамках других наук

Теория информации рассматривается как существенная часть ки­бернетики.

Кибернетика — это наука об общих законах получения, хранения, передачи и переработки информации. Ее основной предмет исследова­ния — это так называемые кибернетические системы, рассматривае­мые абстрактно, вне зависимости от их материальной природы. При­меры кибернетических систем: автоматические регуляторы в технике, компьютеры, мозг человека или животных, биологическая популяция, социум. Часто кибернетику связывают с методами искусственного интеллекта, т. к. она разрабатывает общие принципы создания систем управления и систем для автоматизации умственного труда. Основными разделами (они фактически абсолютно самостоятельны и независимы) современ­ной кибернетики считаются: теория информации, теория алгоритмов, теория автоматов, исследование операций, теория оптимального управ­ления и теория распознавания образов.

Теория информации тесно связана с такими разделами математи­ки как теория вероятностей и математическая статистика, а также прикладная алгебра, которые предоставляют для нее математический фундамент. С другой стороны теория информации исторически и прак­тически представляет собой математический фундамент теории связи. Часто теорию информации вообще рассматривают как одну из ветвей теории вероятностей или как часть теории связи. Таким образом, пред­мет " Теория информации" весьма узок, т. к. зажат между " чистой" ма­тематикой и прикладными (техническими) аспектами теории связи.

Теория информации представляет собой математическую теорию, посвященную измерению информации, ее потока, " размеров" канала связи и т. п., особенно применительно к радио, телеграфии, телевиде­нию и к другим средствам связи. Первоначально теория была посвяще­на каналу связи, определяемому длиной волны и частотой, реализация которого была связана с колебаниями воздуха или электромагнитным излучением. Обычно соответствующий процесс был непрерывным, но мог быть и дискретным, когда информация кодировалась, а затем де­кодировалась. Кроме того, теория информации изучает методы постро­ения кодов, обладающих полезными свойствами.