Tiempos de primera pasada

La sección 15.4 se dedicó a encontrar las probabilidades de transición de n pasos (esto es, dado que el proceso se encuentra en el estado i, determinar la probabilidad (condicional) de que el proceso se encuentre en el estado j después de n periodos). Con frecuencia es conveniente poder hacer afirmaciones en términos de probabilidades sobre el número de transiciones que hace el proceso ir de un estado i a un estado j por primera vez. Este lapso se llama tiempo de primera pasada al ir al estado i al estado j. Cuando j = i, este tiempo de primera pasada es justo el número de transiciones hasta que el proceso regresa al estado inicial i. En este caso, el tiempo de primera pasada se llama tiempo  de recurrencia para el estado i.