Реферат: Теоретические основы и методы системного анализа оптимизации управления принятия решений и
Энтропия двух элементов:
Н(А) + Н(В) = 1 + 1 = 2.
¨ Допустим, что система S элементов А и В может принимать три состояния: «-1», «0», «1» с вероятностями Р1 (S) = Р3 (S) = 0,2; Р2 = 0,6.
Тогда
Н(S) = -2. 0,2. log2 0,2 - 0,6. log2 0,6 = -0,4×(-2,32) - 0,6×(-0,737) = 1,37.
Энтропия системы S меньше суммы энтропий элементов А и В на
DН = Н(А) + Н(В) - Н(S) = 2 - 1,37 = 0,63.
¨ Для расчета изменения энтропии системы через вероятности состояний очень часто используется метод Колмогорова . Допустим, дана структурная схема (граф) состояний подсистемы S. Исходным состоянием системы с равной степенью вероятности может быть одно из четырех состояний, т.е. . Будем считать, что интенсивности переходов l21 , l32 , l43 , l14 , l24 заданы. Тогда можно показать, что скорости изменения вероятности нахождения системы в i-м состоянии определяются как
, (1.3)
где ; n – число узлов графа (количество состояний);
mj - интенсивности переходов по дугам, входящим в i-й узел;
ri – число дуг, входящих в i-й узел;
lk - интенсивности переходов по дугам, исходящим из i-го узла;
mi – число дуг, выходящих из i-го узла;
Pi и Pj – вероятности нахождения системы в i-м и j-м состояниях соответственно.
Заметим, что
.
Установившееся значение вероятности нахождения системы в i-м состоянии определяется из условия
.
Тогда для системы с n состояниями имеем систему из (n + 1) уравнений с n неизвестными:
;. (1.4)
Одно из уравнений (1.4) можно отбросить, так как оно может быть получено из (n - 1) оставшихся.
Пример. Примем l21 = 0,1, l32 = 0,2, l43 = 0,3, l14 = 0,4, l24 = 0,5. Тогда получаем:
l14 . Р4 - l21 . Р1 = 0
l21 . Р1 + l24 . Р4 - l32 . Р2 = 0
l32 . Р2 - l43 . Р3 = 0
l43 . Р3 – (l14 + l24 ). Р4 = 0
Р1 + Р2 + Р3 + Р4 = 1.