Последовательность таких состояний называется цепью

Последовательность таких состояний называется цепью Маркова.В качестве примера рассмотрим возможные состояния грегата, состоящего из двух машин: Ai— обе машины ис-Правны, агрегат работает; Ач — неисправна первая машина, агрегат ремонтируется; Л3 —неисправна вторая машина, агрегат ремонтируется.Схему возможных переходов системы из состояния в состояние удобно представлять в виде графа. На рис. 1.3 приведен граф переходов для указанного агрегата, в котором вершины обозначают состояния, а стрелки — направления возможных переходов в другие состояния. Состояния системы в любой момент времени характеризуются матрицей вероятностей перехода рц н представляют собой условные вероятности перехода системы за один шаг из состояния Л,- в состояние Aj. Эти вероятности являются условными, так как определяются из условия, что известно состояние Ai, в котором система находится после предыдущего шага. Матрица вероятностей перехода для графа, изображенного на рис. 1.3, имеет вид:Данная матрица расшифровывается следующим образом. Если агрегат находился в состоянии Аи то через один шаг он с вероятностью 12 останется в том же состоянии (точнее, вернется в то же состояние), с вероятностью 16 перейдет в состояние Л2 и с вероятностью 13 —в состояние Л3. Из состояния А2 через один шаг он может с одинаковой вероятностью 12 перейти в состояние Л, или остаться в том же состоянии. Перейти в состояние Л3 агрегат не может, что понятно из самого характера состояний. Последняя строка матрицы показывает, что из состояния Л3 агрегат может перейти в состояние А, с вероятностью 13, не может перейти в состояние Л2 и с вероятностью 23 останется в том же состоянии.