本書介紹了馬爾科夫決策過(guò)程及其它相關(guān)方法在公共安全領(lǐng)域的應(yīng)用，主要面向安全科學(xué)與工程專業(yè)的高年級(jí)本科生，作為其安全決策方法類課程的教材，同時(shí)也可作為其它學(xué)科運(yùn)籌學(xué)馬爾科夫過(guò)程部分的參考資料。

在廣與深的關(guān)系上，本書從處理大多數(shù)實(shí)際問(wèn)題使用的馬爾科夫假設(shè)開始，圍繞著馬氏決策過(guò)程和動(dòng)態(tài)規(guī)劃貝爾曼方程，依次介紹有限狀態(tài)問(wèn)題、無(wú)限狀態(tài)問(wèn)題和折扣成本問(wèn)題，之后分別針對(duì)馬氏過(guò)程的各個(gè)要素，從狀態(tài)集、動(dòng)作集等方面向外擴(kuò)展出Q學(xué)習(xí)、近似線性規(guī)劃、隱馬爾科夫模型和部分可觀測(cè)馬爾科夫模型，并用一章簡(jiǎn)略介紹其它常用決策算法，這使得本書在重點(diǎn)突出的同時(shí)具有一定的廣度；

在難與易的關(guān)系上，本書力求避免復(fù)雜艱深的數(shù)學(xué)概念，書中的定理證明和公式推導(dǎo)只需要最基本的高等數(shù)學(xué)知識(shí)，同時(shí)對(duì)于有關(guān)數(shù)學(xué)內(nèi)容以附錄形式做出了說(shuō)明，此外，書中每一個(gè)部分都有緊貼內(nèi)容的例子輔助理解，同時(shí)設(shè)有一章專門討論相關(guān)方法用于安全領(lǐng)域決策的典型案例，使得讀者能清楚地理解本書意圖闡述的內(nèi)容。