Добавил:
Опубликованный материал нарушает ваши авторские права? Сообщите нам.
Вуз: Предмет: Файл:

Теория системного анализа и принятия решений в БЖД. Учебное пособие

.pdf
Скачиваний:
0
Добавлен:
07.09.2026
Размер:
2 Мб
Скачать
☆
4.4. Открытая термодинамическая система как модель физического промышленного эксперимента,
физического измерения, экологического,
техносферного мониторинга
Прелюдия
Рассмотрим более подробно простейшую количественную физическую интерпретацию термодинамической системы. Пусть мы имеем физическую систему, которая может находиться в одном из M равноправных и, следова­тельно, равновероятных состояний (возможностей). Обозначим совокупность этих возможностей как X.
Проведем действия над системой, суть которых сводится к тому, что реализуется одно из M возможных состояний системы. Это чественно характеризуется случайной величиной X. До действий над систе­мой существует действиях над системой реализуется одно из ее состояний (реализуется зна­чение x случайной величины X). Будем считать это описанием модели физи­ческого эксперимента.
Отметим, что здесь система переходит в конкретное состояние x под воздействием окружающей среды. До сих пор рассматривались лишь вариан­ты
возможных состояний системы X. Теперь же система перешла в кон-
кретное состояние x и неопределенность в состоянии снята. Конкретное со­стояние является следствием внешнего воздействия окружающей среды, т. е. взаимодействия внешней среды с данной открытой системой. Это простей­ший процесс
Именно открытость данной системы привела к тому, что над ней стало возможным совершать действия, переводящие ее в одно из возможных со­стояний. Напомним, что сам переход в данном простейшем случае осуществ­ляется с помощью вероятностного механизма.
Пример 4.4
Бросание игральной кости можно рассматривать как простейший при­мер физического эксперимента, проясняющего вероятностные и информаци­онные явления. В результате действия над системой выпадает грань, на кото­рой написано число xi, 1 x 6. Таким образом, получаем числовое значение x
как результат эксперимента X. Очевидно, что результат эксперимента X есть значение случайной величины
В результате бросания кости реализуется одно из возможных состоя­ний x
эксперимента. Здесь, в отличие от приводимых ранее примеров, под-
i
черкивается факт фиксации исхода эксперимента (результат бросания кости). Это явление физической фиксации результатов эксперимента называется
цепцией
; связисты называют его приемом сообщения.
неопределенность в возможных состояниях системы. При
рецепции.
x.
состояние коли-
ре-
80
Интерлюдия
Как уже отмечалось ранее, некоторые авторы рассматривают пониже­ние энтропии в одной из подсистем как результат взаимодействия подсистем внутри закрытой системы. Такое рассмотрение дает возможность вводить физическую величину пии в подсистеме после рецепции в закрытой системе. Здесь происходит фи­зический процесс фиксации измененного состояния подсистемы. Этот про­цесс фиксации является изменением детерминированного состояния
ник – рецептор
Однако поскольку физический процесс рецепции требует дополни­тельного расхода высококачественной энергии, требуется ее поставка из внешней среды: т. е. мы имеем процесс взаимодействия системы с внешней средой. Выражаясь метафорически, «чтобы получить информацию, надо за­тратить высококачественную энергию». Следовательно, необходимо гово­рить об открытости системы. Как крытости системы для приема информации».
Еще раз подчеркнем, что в процессе приема сообщений выполняются все условия физического эксперимента: 1) повторяемость; 2) воспроизводи­мость; 3) постоянные условия проведения; 4) возможность логического опи­сания.
количество информации как меру понижения энтро-
прием-
, для чего необходимо «совершить работу».
отмечалось ранее, здесь речь идет об «от-
Основная тема
Введем основное определение количества информации, ис­пользуемое в
мации
. При этом будем опираться на введенное ранее понятие фи-
статистической термодинамике и теории инфор-
зического эксперимента как неравновесного процесса в открытой системе.
До начала эксперимента в отношении будущего состояния X системы существует некоторая
неопределенность. Эта неопреде-
ленность и характеризуется средней энтропией системы S~. Если же речь идет о приемной системе до принятия сообщения, то назо­вем эту энтропию априорной энтропией H
apr
.
После проведения эксперимента мы получаем конкретное со­стояние системы x стемы снимается полностью: H
; при этом неопределенность в отношении си-
i
= 0. Фиксация состояния – это
apst
увеличение порядка в системе (т. е. ее структурной сложности), ко­торое приводит к уменьшению неопределенности в системе. Фор­мально эта неопределенность обозначается как апостериорная эн­тропия H
apst
.
Суть эксперимента сводится к тому, чтобы уменьшить не­определенность в отношении исследуемой системы.
81
Физическая величина, которая характеризует степень умень-
IdSdS
шения неопределенности системы, задается как разность априорной и апостериорной энтропий и называется
I.
ции
количеством информа-
Для различения этой физической величины от количества ин-
формации по Бриллюэну (где
количество информации – это взя-
тая с обратным знаком энтропия) новая физическая величина полу­чила название
чества взаимной, парной, условной информации
Естественно, что в процессе проведения эксперимента
стериорная энтропия должна быть меньше априорной
количества информации по Шеннону, или коли-
.
апо-
, т. е. эн­тропия (степень неопределенности) системы должна уменьшаться. Понижение энтропии системы физически связано с повышением внутренней упорядоченности системы. Это определяет способность системы к совершению работы.
Понятно, что таким образом
физическая величина
характеризует способность данной систе-
мы к совершению работы
A (т. е. возможность частиц совершать
количество информации I как
упорядоченные движения, если речь идет о модели идеального га­за). Однако согласно законам термодинамики понижение энтропии требует поступления дополнительной внутренней энергии dU, что­бы система совершила работу.
Таким образом,
количество информации представляет собой
еще одну физическую величину, которая количественно фиксирует поступление внутренней энергии в открытую систему; при этом
(H
количественно фиксируется процесс понижения энтропии S
).
i
apr
Иными словами, количество информации I, наряду с работой A, теплотой Q и энтропией S, характеризует процессы преобразования энергии в неравновесных открытых термодинамических системах.
Как уже неоднократно говорилось, можно ввести новую фи­зическую величину – обобщенную энтропию S*, которая является суммой локальной энтропии S и количества информации I:
S* = S + I = const;
d
.0*
(4.19)
При этом можно говорить о законе сохранения этой суммы. Если энтропия возрастает, то количество информации убывает, и наоборот, если энтропия убывает, то количество информации
82
возрастает (см. (4.19)). Можно интерпретировать эту энтропию как внутреннюю (локальную) энтропию открытой системы S
. Тогда ее
i
локальное понижение количественно описывается как повышение количества информации I. В этом случае сумма может быть интер­претирована как внешняя энтропия открытой системы, которая способна сохранять постоянство или возрастать. Очевидно, что за­кон возрастания такой внешней энтропии S можно интерпретиро­вать как
тых систем
обобщенный второй закон термодинамики для откры-
:
dS = dS
+ dSi. (4.20)
e
В менее строгой форме физический смысл выражения (4.20)
можно выразить так:
«платить» повышением энтропии dS
римент) сопровождается возрастанием энтропии dS
за «полученную информацию» dI нужно
. Любое измерение (экспе-
/
dt в окружаю-
щей среде. Для возрастания энтропии во внешней среде требуется локально понизить энтропию dS
/ dt (выражаясь более точно,
i
«уменьшить производство локальной энтропии»). Этого можно до­стичь, лишь «совершив работу» A. Подобные процессы были ранее описаны как процессы понижения локальной энтропии в рамках теорем Онсагера и Пригожина. Таким образом, можно сказать, что открытые термодинамические информационные процессы (процес­сы измерения, процессы в системах связи с помехами,
процессы получения информации) количественно связаны с совершением ра­боты A.
Интерлюдия
Поскольку информационная система есть разновидность термодинами­ческой системы, то возможно количественно описывать информационные процессы в температурах и других термодинамических характеристиках. Ра­бота, затрачиваемая на получение единицы количества информации, связана с температурой, при которой измеряется информация. Количественная ин­терпретация этого процесса излагается далее.
Допустим, что имеется идеальный газ, содержащий N молекул при лении p и температуре T. Пусть при флюктуации объем газа V уменьшился на V – dV; тогда работа, расходуемая на это, равна A = pdV.
Вычислим увеличение количества информации, обусловленное уточ­нением положения частиц в этом объеме. Пусть вероятность нахождения ча­стицы в данном положении в исходном объеме V будет P = 1, а вероятность
дав-
83
ее нахождения в данном положении в новом объеме составит P* = 1 – dV / V.
N
I
A
T
N
AKkTIAIAKN
I
A
K
Можно вычислить вероятность P* нахождения частицы в этом объеме для всех N частиц: P** = (1 – dV
Кроме того, можно вычислить работу A, необходимую для «уточнения» нового положения частиц: A = pdV. Отсюда, используя формулу для количе­ства информации по Бриллюэну, через задание вероятности состояний полу­чаем
I = K
где K – константа для бинарного представления информации; k – константа для термодинамического представления.
Находим отношение работы к единице количества информации.
Если информация исчисляется в битах, то получение одного бита ин­формации требует энергии, равной k ставляет 2
· 10–21
Дж.
/
V)N.
ln1 / (1 – dV / V)N; I = KNdV / V; N >> 1.
pVKNdVVpdV
pVKNdVVpdV
;//)/( K
pV
.2ln/1
/
K = kТ ln 2. При Т = 300 К энергия со-
;)/( k
);/(;/)/();/(/;/)/( KkTI
Явлением записывания информации можно считать физиче­ский процесс, протекающий при взаимодействии термодинамиче­ской системы с окружающей средой. Для его осуществления необ­ходима передача (потребление) энергии (в виде теплоты) A > IT, где I – бриллюэновское количество информации. Возможен и обратный процесс, при котором образование локального понижения энтропии
dI (получение информации) может быть использовано
для совер-
шения работы A. Здесь физический механизм понижения энтропии можно интерпретировать как явление обратной связи.
Напомним еще раз, что существенной особенностью процес­сов преобразования энергии в открытых системах является то, что процесс совершения работы может осуществляться с задержкой во времени. Это явление получило в кибернетике и биологии название
памяти.
В технологических процессах, биологии и экологии механиз­мы обратной связи проявляются как автокаталитические химиче­ские реакции, мембранные механизмы, механизмы «хищник – жертва», механизмы естественного отбора. В экономике это ры-
84
ночные механизмы. Физический механизм типа обратной связи для открытых систем часто обозначается как процесс
формации
дить и к процессу
(рецепция). Механизмы обратной связи могут приво-
генерации информации.
получения ин-
Пример 4.5
Рассмотрим известную притчу о демоне Максвелла, который «получает информацию» о пролетающих частицах. Если эти частицы имеют большую скорость, он пропускает их во вторую часть емкости. Тем самым осуществ­ляется сортировка частиц по кинетическим энергиям и, следовательно, появ­ляется возможность совершения работы A над окружающей средой (посред­ством образовавшейся разности давлений). мации требует локального понижения энтропии dS над системой.
При этом само получение инфор-
или совершения работы A
i
Основная тема
Еще раз отметим, что суть явлений состоит в том, что термо­динамическая система не находится в изолированном состоянии. В этой ситуации второй закон термодинамики dS* > 0 нужно обобщить, заменив неравенство dS* > 0 неравенством (dS
+ dI) > 0.
i
Следовательно, если имеется приток информации dI, то мож­но тепловую энергию dQ (теплоту) системы превратить в механи­ческую энергию (работу) dA без помощи холодильника.
Бриллюэновское обобщение второго закона термодинамики говорит о необходимости энергетических затрат в процессе изме­рения и при записи информации. Если система находится при тем­пературе T,
то для получения количества информации о системе необходимо потратить энергию TdI. Необходимость затраты энер­гии на получение информации при измерениях, разумеется, распро­страняется и на физические
каналы с шумом.
Шум в данном случае определяется как явление, связанное с тем, что на приемной части канала связи неопределенность в отношении состояния системы (сообщения) не снимается до конца
(апостериорная энтропия не всегда равна нулю). Есте­ственно, шум в макроскопических системах можно количественно описывать температурой Т.
Пример 4.6
При бросании кости и выяснении выпавшего числа x
формация, количество которой и можно обозначить как I. В этом случае по-
85
поступает ин-
i
сле эксперимента (бросание кости) никакой неопределенности не остается: апостериорная энтропия равна нулю (H говорить о том, что количество информации численно равно исчезнувшей априорной неопределенности (энтропии): I = H термодинамических систем такой процесс, согласно второму закону термо­динамики, самопроизвольно происходить не может. Напомним, что второй закон термодинамики запрещает в изолированной системе самопроизвольные процессы, сопровождающиеся понижением энтропии.
Таким образом, при проведении экспериментов и измерений необхо­дима организация дополнительных энергокомпенсирующих процессов. Для последовательного количественного описания информационных процессов в
статистической термодинамике рассматривают процессы в неравновесных
открытых системах.
Еще раз отметим, что наличие после эксперимента некоторой неопре­деленности состояния системы интерпретируется как воздействие случайных помех, или шумов. При их отсутствии мы получаем случай, когда количество информации численно равняется априорной неопределенности (априорной энтропии, без учета знака): I = H мации в этой ситуации получило специальное название
энтропия
).
apr
= 0). В этом крайнем случае можно
apst
= I*. Однако для закрытых
apr
= I*. Именно поэтому количество инфор-
негоэнтропия (неге-
Описанный ранее неравновесный термодинамический процесс на практике условно называют
ции в результате эксперимента
процессом получения информа-
. Учитывая тот факт, что в резуль­тате состояние системы описывается с помощью численного значе­ния физической величины (X = xi, P(x)), можно говорить о процессе
измерения.
4.5. Термодинамическая система как модель системы
промышленного мониторинга, дистанционного зондирования
или канала связи при наличии помех
Основная тема
Термодинамическая модель неравновесной открытой системы позволяет описывать технический процесс передачи сигналов в си­стемах связи в присутствии помех и, соответственно, описывать процесс дистанционного зондирования при наличии помеховых воздействий. Кратко сформулируем основные физические и инже­нерные термины для описания систем связи. Как отмечалось ранее, некоторая совокупность символов трактуется как чей техники связи является
организация передачи сообщений.
Процесс преобразования сообщения в последовательность знаков
86
сообщение. Зада-
у связистов называется кодированием. Для осуществления этого процесса устанавливается взаимно-однозначное соответствие меж­ду сообщениями и знаками, которое называется
кодом.
Передача сообщений осуществляется с помощью физического носителя или физического процесса, который обеспечивает хране­ние сообщений и их передачу на большие расстояния. Физический процесс, несущий передаваемое сообщение, называют Процесс преобразования сообщения в сигнал носит название
ляции ляции
щения, именуется
, а процесс преобразования сигнала в сообщение – демоду- . Напомним, что физический процесс, порождающий сооб-
источником сообщений.
сигналом.
моду-
Аналогичным образом процесс дистанционного зондирования можно представить как прохождение локационного сигнала через окружающую среду и его отражение от объекта зондирования. При отражении сигнала происходит модуляция сигнала свойствами объекта, полезными для пользователя.
С точки зрения статистической термодинамики процессы в системах связи и дистанционного зондирования можно описывать с помощью введенных ранее термодинамических
ника сообщений
Пример 4.7
Примером сообщения является текст. Любой текст состоит из конечно­го числа элементов (букв). Полный набор букв называется алфавитом источ­ника сообщения. Отметим, что от символов (букв) легко перейти к числам, если пронумеровать элементы алфавита. При кодировании происходит про­цесс преобразования букв в соответствующие числа (кодовые символы).
Рассмотрим в рамках элементарной общений, который порождает некоторую последовательность знаков длиной n, условно называемую словом. Каждый знак порождается из некоторого ал- фавита объемом m.
Пример 4.8
Примером источника сообщений является двоичная система (бросание монеты), которая имеет только два символа (или буквы), m = 2. Это ответы «да» и «нет», т. е. слова (или последовательности) из n символов, то источник сообщений спо­собен сформировать M оригинальных слов.
и канала связи.
теории информации источник со-
числа 1 и 0. Если образовать в источнике все возможные
моделей источ-
87
Основная тема
KnIMK
I
Источник сообщений можно моделировать с помощью термо­динамической системы, состоящей из n подсистем (из n символов). При этом каждая подсистема может принимать одно из m состоя­ний. Тогда источник сообщений, согласно (2.17), может порождать M слов. Согласно (2.19), источник сообщений обладает набором физических величин:
1)
cлучайной энтропией для фиксированного i-го сообщения:
PKS ln
; (4.21)
ii
2)
средней энтропией сообщения для источника:
,ln–
где P
– вероятность порождения i-го слова;
i
3)
энтропией источника:
. PPKn S
Формулы (4.21)–(4.23) широко используются в технике связи и дистанционном зондировании для описания количественных ха­рактеристик источников сообщений и качества самих сообщений.
Если сообщение принимается без помех, то количество ин­формации равняется энтропии (без учета знака). В элементарной теории информации в такой ситуации для источника сообщений используются также следующие формулы для количества мации:
1.
Формула Хартли:
С помощью (4.24) находят количество информации на одно сообщение. Все сообщения равновероятны.
PPK H
(4.22)
ii
ln
(4.23)
ii
m.
ln;ln
(4.24)
инфор-
88
2. Формула Шеннона для среднего количества информа-


ции на сообщение
:
ср
ln
H. PPK I
ii
(4.25)
Формула (4.25) определяет среднее количество информации на одно сообщение (в технике связи эту величину иногда называют энтропией сообщения H).
3.
Формула Шеннона для источника сообщений:
.ln
PPKnIH
ист ii
(4.26)
Это выражение определяет количество информации на источ­ник I
ист
.
Формулы (4.24)–(4.26) широко используются в технике связи и дистанционном зондировании для описания количества инфор­мации от источников сообщений, а также количества информации, содержащейся в отдельных сообщениях.
Рассмотрим еще одну модель источника сообщений. Здесь ис­точником сообщений является
измерительное устройство, в кото-
ром непрерывная физическая величина подвергается квантованию по уровню. Образуется конечное число отсчетов с фиксированным набором уровней. Число уровней определяется по формуле кванто­вания по уровню:
,/1
EXm
max
(4.27)
где X
– максимальное значение измеряемой физической величи-
max
ны; E – двойная допустимая ошибка измерений уровня.
Число уровней – это и есть объем алфавита. Число дискрет­ных величин определяется по теореме отсчетов Котельникова (здесь используются теория целых функций и изучаемые в курсах
теории обработки сигналов и в функциональ-
теория сигналов,
ном анализе)
n = 2FT, (4.28)
где F – полоса частот сигнала (физической величины, изменяющейся во времени); T – период сигнала (изменения физической величины).
89
Соседние файлы в предмете [НЕСОРТИРОВАННОЕ]