Modelos de procesos de Markov

Los modelos de procesos de Markov son útiles para estudiar la evolución de ciertos sistemas después de varias repeticiones. Por ejemplo, se han usado procesos de Markov para describir la probabilidad de que una máquina que está funcionando en un periodo continúe funcionando o se descomponga en otro periodo.