Марковские цепи применяемые для прогнозирования поведения подобного рода систем можно разделить на две группы. Цепи Маркова с дискретным временем и цепи Маркова с непрерывным временем.