Случайный процесс называется Марковским, если вероятность будущего состояния системы, отвечающее данному процессу, зависит только от её состояния в настоящий момент времени и не зависит от того в каких состояниях она была в прошлом.
Действительно работоспособность автомобиля в будущем зависит только от фактического технического состояния, к которому автомобиль может прийти по-разному.
В теории технической эксплуатации наибольшие привилегии находят цепи Маркова и Марковские последовательности.
В цепях Маркова чётко определены состояния системы S1, S2, S3, …, Sn. Переход из одного состояния в другое осуществляется в дискретные моменты времени t1, t2, t3, …, tn и определяется переходными вероятностями.
Цепи Маркова хорошо иллюстрируются графом состояния системы, на котором отмечены состояния системы, а стрелками указаны направления переходов. Если указаны вероятности переходов, то такой граф называется размеченным графом.
|
 |
 |
|
|
| ||||||
 |  |
Рисунок 3. Размеченный граф состояния системы
При исследовании случайных процессов большое значение имеют Марковские процессы с дискретным состоянием и непрерывным временем.
Марковские процессы с непрерывным временем характеризуются случайными моментами возможных переходов из одного состояния в другое. При этом переход происходит мгновенно. Такой дискретный процесс с непрерывным временем представляет собой поток событий, например, поток автомобилей с отказами, поступающих на посты ТР или поток отказавших агрегатов, поступающих в цеха и на посты.