Como resultado de estas propiedades de comunicación, se puede hacer una partición del espacio de estados en clases ajenas, en donde se dice que dos estados que se comunican pertenecen a la misma clase. Así, los estados de una cadena de Márkov pueden constituir una o más clases ajenas (una clase puede constituir en un solo estado). Si existe sólo una clase, es decir, si todos los estados se comunican, se dice que la cadena de Márkov es irreducible. En el ejemplo de inventarios, la cadena de Márkov es irreducible. En el primer ejemplo de las acciones, la cadena de Márkov es irreducible. El ejemplo del juego contiene tres clases; el estado 0 forma una clase, el estado 3 forma una clase y los estados 1 y 2 forman una clase.
No hay comentarios.:
Publicar un comentario