Уравнения Колмогорова. 
Финальные вероятности состояния СМО

Рассмотрим математическое описание марковского случайного процесса с дискретными состояниями системы S₀, S_1? S₂ (см. рис. 5.2) и непрерывным временем. Полагаем, что все переходы системы массового обслуживания из состояния S, в состояние Sj происходят под воздействием простейших потоков событий с интенсивностями Хф а обратный переход — под воздействием другого потока. Введем обозначение р_г как вероятность того, что в момент времени t система находится в состоянии Sj. Для любого момента времени t справедливо записать нормировочное условие — сумма вероятностей всех состояний равна единице:

Проведем анализ системы в момент времени t, задав малое приращение времени At, и найдем вероятность p_{(t + АО того, что система в момент времени (t + At) будет находиться в состоянии S, которое достигается разными вариантами:

• а) система в момент времени t с вероятностью р,-(?) находилась в состоянии S и за малое приращение времени так и не перешла в другое соседнее состояние — ни в So, ^{ни в} S₂. Вывести систему из состояния Sj можно суммарным простейшим потоком с интенсивностью (А, ю + А,₁₂), поскольку суперпозиция простейших потоков также является простейшим потоком. На этом основании вероятность выхода из состояния Sj за малый промежуток времени At. приближенно равна
• (7i₁₀ + Х₁₂)Дt. Тогда вероятность невыхода из этого состояния равна 11 — (А,₁₀ + А,₁₂)Д?|. В соответствии с этим вероятность того, что система останется в состоянии S, на основании теоремы умножения вероятностей равнаP (t)[ 1 — (А,₁₀ + X₂)At];
• б) система находилась в соседнем состоянии 5₀ и за малое время At перешла в состояние Переход системы происходит под воздействием потока A*oi с вероятностью, приближенно равной At. Вероятность того, что система будет находиться в состоянии S[, в этом варианте равна p₀(?)^oi А?;
• в) система находилась в состоянии S₂ и за время At перешла в состояние S под воздействием потока интенсивностью %2 ^с вероятностью, приближенно равной Х₂АL Вероятность того, что система будет находиться в состоянии 5_1? равна p₂(t)_2{At.

Применяя теорему сложения вероятностей для этих вариантов, получим выражение.

которое можно записать иначе:

При переходе к пределу при Д? —> 0 приближенные равенства перейдут в точные, и тогда получим производную первого порядка.

что является дифференциальным уравнением.

Проводя рассуждения аналогичным образом для всех других состояний системы, получим систему дифференциальных уравнений, которые называются уравнениями А. Н. Колмогорова:

Для составления уравнений Колмогорова существуют общие правила.

Уравнения Колмогорова позволяют вычислить все вероятности состояний CMC) Si в функции времени p{t). В теории случайных процессов показано, что если число состояний системы конечно, а из каждого из них можно перейти в любое другое состояние, то существуют предельные (финальные) вероятности состояний, которые показывают на среднюю относительную величину времени пребывания системы в этом состоянии. Если предельная вероятность состояния So равна ро = 0,2, то, следовательно, в среднем 1/5 рабочего времени система находится в состоянии 5₀. Например, при отсутствии заявок на обслуживание k = 0, ро ⁼ 0,2, следовательно, в среднем 2 ч в день система находится в состоянии 5₀ и простаивает, если продолжительность рабочего дня составляет 10 ч.

Поскольку предельные вероятности системы постоянны, то, заменив в уравнениях Колмогорова соответствующие производные нулевыми значениями, получим систему линейных алгебраических уравнений, описывающих стационарный режим СМО. Такую систему уравнений составляют по размеченному графу состояний СМО по следующим правилам: слева от знака равенства в уравнении стоит предельная вероятностьр, рассматриваемого состояния S_f умноженная на суммарную интенсивность всех потоков, выводящих (выходящие стрелки) из данного состояния 5, систему, а справа от знака равенства — сумма произведений интенсивности всех потоков, входящих (входящие стрелки) в состояние 5, систему, на вероятность тех состояний, из которых эти потоки исходят. Для решения подобной системы необходимо добавить еще одно уравнение, определяющее нормировочное условие, поскольку сумма вероятностей всех состояний СМО равна единице

Например, для СМО, имеющей размеченный граф из трех состояний Sq, Si, S₂ (рис. 5.2), система уравнений Колмогорова, составленная на основе изложенного правила, имеет следующий вид:

Пример 5.6. Составим систему уравнений Колмогорова в общем виде для случая, когда граф состояний имеет следующий вид (рис. 5.3).

Рис. 5.3.

Плотность вероятностей этих переходов указана рядом с соответствующими стрелками. Пользуясь приведенными выше правилами, получаем систему уравнений:

К этим уравнениям надо добавить еще начальные условия. Например, если при t = 0 система S находится в состоянии S, то начальные условия можно записать так:

Переходы между состояниями СМО происходят под воздействием поступления заявок и их обслуживания. Вероятность перехода в случае, если поток событий простейший, определяется вероятностью появления события в течение времени At, т. е. величиной элемента вероятности перехода XjjAt, где Ху — интенсивность потока событий, переводящих систему из состояния i в состояние j (по соответствующей стрелке на графе состояний).

Если все потоки событий, переводящие систему из одного состояния в другое, простейшие, то процесс, протекающий в системе, будет марковским случайным процессом, т. е. процессом без последствия. В этом случае поведение системы достаточно просто определяется, если известны интенсивность всех этих простейших потоков событий. Например, если в системе протекает марковский случайный процесс с непрерывным временем, то, записав систему уравнений Колмогорова для вероятностей состояний и проинтегрировав эту систему при заданных начальных условиях, получим все вероятности состояний как функции времени:

Во многих случаях на практике оказывается, что вероятности состояний как функции времени ведут себя таким образом, что существует

независимо от вида начальных условий. В этом случае говорят, что существуют предельные вероятности состояний системы при t —? оо и в системе устанавливается некоторый предельный стационарный режим. При этом система случайным образом меняет свои состояния, но каждое из этих состояний осуществляется с некоторой постоянной вероятностью, определяемой средним временем пребывания системы в каждом из состояний.

Вычислить предельные вероятности состояния p_t можно, если в системе положить все производные равными нулю, поскольку в уравнениях Колмогорова при t—>°° зависимость от времени пропадает. Тогда система дифференциальных уравнений превращается в систему обычных линейных алгебраических уравнений, которая вместе с нормировочным условием позволяет вычислить все предельные вероятности состояний.

Пример 5.7. Запишем систему алгебраических уравнений для вычисления предельных вероятностей состояний системы, изображенной на рис. 5.3.

Для этого допустим, что.

тогда из записанной ранее в примере 5.6 системы уравнений Колмогорова получаем:

и, кроме того, мы должны учесть нормировочное условие.

Любое из уравнений записанной системы можно исключить, использовав вместо него нормировочное условие.