توصف عملية ماركوف بدالة الاحتمال الانتقالي transition probability
function ويرمز لها غالباً بالرمز ,;t,to) او
t
P(E,tx,to)
التي تمثل الاحتمال المشروط لكون حالة النظام في الزمن ، تنتمي الى E اذا اعطيت ان النظام في حالة . في الزمن (1) يقال ان لعملية ماركوف احتمالات
stationary transition probabilities
انتقالية ثابتة homogene- ous اذا اعتمدت متجانسة الزمن
فقط خلال الفرق (1) - (٤)
P(x,to;E,t)
او انها
على , to
توجد بحوث كثيرة حول عمليات ماركوف وخصوصاً الاسس الرياضية لهذه - النظرية من جانب ، وتطبيقات هذه النظرية من جانب اخر . نوضح في هذا الكتاب كيفية ظهور عمليات ماركوف كنماذج للظواهر الطبيعية . ندرس في هذا المجال متسلسلات ماركوف وذلك لسهولة الرياضيات المتعلقة بها ندرس بصورة رئيسية ما يلي : (1) سلوك التبعية او الانتقال الزمنية لمتسلسلة ماركوف . نجد دالة الاحتمال الانتقالي وذلك بايجاد وحل المعادلات التي تحقق ) دوالاً تفاضلية تكاملية ، او انواع
اخرى ) .
(ii) السلوك الطويل المدى ( او الحالة المستقرة ( لمتسلسلة ماركوف بصورة خاصة تحديد شروط وفقاً لهذه الشروط سيوجد احتمال يقاس بـ (E) بحيث
تكون للغاية
غا
lim P(x,to;E,t) =
(E)
قيمة حقيقية مستقلة عن to; x
(ii) سلوك التواجد الزمني وازمنة الدور الأول ، ندرس التوزيعات الاحتمالية لكمية الوقت الذي استغرقته المتسلسلة في الحالات المختلفة ( ومجموعات الحالات ) وطول الزمن اللازم لعبور النظام من مجموعة حالات الى مجموعة حالات اخرى
. مثال 14
متسلسلة ماركوف المتقطعة المعلم :
بالرموز
تأمل نظاما فيزيائيا يشاهد في مجموعة متقطعة من الازمنة . ارمز للمشاهدات المتتابعة يفترض ان يكون ١٠ متغيراً عشوائياً . تمثل
X'o, X 1, · · ·, X'n, · · · .
٢٤٣
ص ٢٤٣