🔗 CADENAS DE MARKOV

Modela sistemas que solo recuerdan el presente

Estados y transiciones Matriz P Distribución estacionaria
🐱 Piénsalo así: Las cadenas de Markov son como un gato que se mueve aleatoriamente entre habitaciones: solo importa dónde está ahora, no cómo llegó allí. Si está en la cocina, la probabilidad de ir al jardín es la misma sin importar si antes estuvo en el baño o en el salón.

🎯 ¿Qué aprenderás?

Matriz de Transición P

Probabilidad de ir de estado i (fila) a estado j (columna). Cada fila suma 1.

→ A
→ B
→ C
A
B
C
P^3 (prob. a 3 pasos)

Simular camino aleatorio

Haz clic en un estado inicial, luego avanza paso a paso.

🌞 A: Soleado
☁️ B: Nublado
🌧️ C: Lluvioso
Paso 0: 🌞
🌞 A:
100%
☁️ B:
0%
🌧️ C:
0%

Distribución Estacionaria π

π · P = π: la distribución que no cambia con el tiempo.

π(A)
π(B)
π(C)
Suma

Gambler's Ruin

Un jugador con $5 apuesta $1 cada ronda (p=0.5). ¿Probabilidad de ruina?

Fortuna inicial:
p (ganar):
0.50
Prob. Ruina
Prob. Ganar
💡 Selecciona un estado inicial y avanza paso a paso para ver cómo la cadena de Markov evoluciona.

📌 Resumen del módulo