Elementos de una cadena de Markov...Procesos estocasticos2!

De antemano les agradezco su ayuda en este problema....Procesos estocasticos!

Cada familia estadounidense se clasifica según donde vive como urbana, rural o suburbana. Durante un año especifico, 25% de las familias urbanas se mudaron a una ubicación suburbana, y 15% se mudaron a un área rural; también, 16% de las familias suburbanas se trasladaron a un área urbana y 6% se pasaron a una ubicación rural; por último, 8% de las familias rurales se fueron a un área urbana y 3% se cambiaron a un lugar suburbano. Establezca:
• Defina Xt, S y T
• Elabore Grafo
• Establezca la matriz estocástica
• Establezca la distribución inicial.
• Si una familia ahora vive en un lugar urbano, ¿cuál es la probabilidad de que viva en un área urbana dos años a partir de ahora? ¿Un área suburbana? ¿Un área rural?