فهرست مطالب *
 فصل اول: الگوريتم تكرار ارزش *
 فصل دوم: كاربردهاي مسايل قطعي *
 فصل سوم: برنامه ريزي ماركوف با تعداد مراحل محدود *
 فصل چهارم: برنامه ريزي ماركوف با تعداد مراحل نامحدود *
 فصل پنجم: برنامه ريزي شبه ماركوفي *
 پيوست 1: حل تمرين‌ها *
 پيوست 2: فهرست اسامي افراد *
 منابع و مآخذ *
 نمايه *
 واژه‌نامه *