Рисунок 3.3 – Простейший процесс
Соответственно
Если
Состояние процесса, приведенного на рис. 3.3 опишем с помощью функции распределения момента
где
На основании этих соотношений находят разнообразные характеристики процесса. Так вероятность пребывания процесса в нулевой вершине может быть определена из условия
Применяя к выражению (3.10) преобразование Лапласа и используя формулы (3.9), получаем
Если в момент
Определение разложения в ряд функции
Увеличим число вершин графа на единицу (рис. 3.4.). Заметим, что в этом случае процесс блужданий относительно нулевой вершины может быть описан с помощью некоторого эквивалентного процесса, соответствующего переходам на вспомогательном графе изображенном на рисунке 3.5а.
Рисунок 3.4 – Полумарковский процесс с трема состояниями
Рисунок 3.5 – Эквивалентные графы для исследования: а)блужданий относительно нулевого состояния; б) возврата в нулевое состояния; в) блужданий относительно промежуточного состояния
Обозначим через
Определим функцию
где
С помощью последних выражений находим преобразование Лапласа распределения времени первого попадания процесса в состояние А для графа, изображенного на рис 3.5б
Состояние
где
Это уравнение описывает еще одно общее и важное свойство марковских процессов, для которых эволюция вероятности перехода
Отсюда, учитывая, что начальные условия для рассматриваемого случая
Теперь из условия
Подставляя выражение (3.15) в формулу (3.13), получаем преобразование Лапласа вероятности пребывания процесса в нулевом состоянии
Для определения функции
полученных из условия равенства распределений времени пребывания процесса в состоянии 1 и времени возврата в это состояние для исходного графа (рис. 3.4) и эквивалентного (рис. 3.5в). Разрешая систему уравнений (3.17) относительно неизвестных функций, находим
Теперь на основе формулы (3.13), учитывая совпадения форм графов, изображенных на рисунке 3.8, а и б, и используя (3.18), находим преобразование Лапласа вероятности пребывания процесса в состоянии 1
где
Функция
Дальнейшее обобщение рассматриваемого класса полумарковских процессов проведем на случай однородных блужданий на неограниченном графе переходов, изображенном на рис. 3.6, где