[التويجري]

اقتباس المشاركة الأساسية كتبها الصباخ فيه أحد يعرف يشرح لي سلسلة ماركوف!

سلسلة ماركوف هي عملية عشوائية تحمل خاصية ماركوفية. في عملية كهذه، تكهُنُ المستقبل انطلاقا من الحاضر لا يحتاج إلى معرفة الماضي. ولقد أخذت اسم مكتشفها أندري ماركوف.

وهي عملية تصادفية يكون فيها التوزيع الاحتمالي الشرطي لحالة النظام في أي لحظة مستقبلية، حيث الوضع الحالي معطى، مستقلاً عن كل معرفة إضافية بإمكاننا الحصول عليها من التاريخ السابق للنظام.

سلسلة ماركوف في وقت متقطع هي السلسلة X1, X2, X3, ... متكونة من متغيرات عشوائية. مجموعة القيمات الممكنة تدعي فضاء الحالات. وXn تدعى حالة العملية في الآن n.

إذا كان توزيع الاحتمال الشرطي لXn+1 على الحالات الفارطة دالة وحده إذن . حيث x هي جالة ما في العملية. المعادلة هذه تعرف بالاحتمال الماركوفي.