Markov Zinciri Nedir?

Matematikte, Markov Zinciri (Andrey Markov'un adına atfen), Markov özelliğine sahip bir stokastik süreçtir Markov özelliğine sahip olmak, mevcut durum verildiğinde, gelecek durumların geçmiş durumlardan bağımsız olması anlamına gelir Bir başka deyişle, mevcut durumun açıklaması, sürecin gelecekteki evrimini etkileyecebilecek tüm bilgiyi kapsar Gelecek durumlara belirli bir şekilde değil, olasılıksal bir süreçle ulaşılacaktır

Her bir anda sistem belirli bir olasılık dağılımına bağlı olarak kendi durumunundan başka bir duruma geçebilir yahut aynı durumda kalabilir Durumda olan değişiklikler geçiş olarak bilinir ve çeşitli durum değişmeleriyle ilişkili olasılıklar da geçiş olasılıkları olarak adlandırılır

Markov zincirine bir örnek basit rastgele yürüyüş olur Basit rastgele yürüyüş için durum uzayı bir gösterim üstünde bir grup köşeler halindedir Geçiş aşamaları ise (yürüyüşün geçmişinde ne olmuş olursa olsun) cari köşeden herhangi bir komşu köşeye gitmeyi kapsar Cari köşeden herhangi bir komşu köşeye gitme olasılığı hep aynı olup birbirine eşittir