先前介紹的馬可夫鍊是離散型的動力系統的類推，那連續型動力系統的類推就是馬可夫過程。

範例

一個重型設備修理廠負責鏟車的維護與修理，當鏟車損壞時按先後順進行修理。工廠可以存放27台鏟車，過去一年工廠修理了54台，而修理一台鏟車平均需時約三天。過去幾個月，這樣的操作方式有效率上的問題，1)修理所需的時間以及2)技術人員負責這任務所用的時間比例。

1. 提出問題
   變量:
   在時間月內修理的鏟車數量
   假設:
   待修理的鏟車為4.5台/月
   最多修理鏟車為7.3台/月(每月工作天數22天)
   目標:
   計算
2. 選擇建模方法
   假設狀態空間是有限的，，隨機過程是馬可夫過程，則
   滿足馬可夫性質，1)，2)下一個狀態的機率僅跟當前的狀態有關。
3. 推導數學表達式
   令，且狀態轉移僅能從到或
   
   利用馬可夫過程模型的平衡方程，亦即每個狀態流入的速率等於流出的速率，可得
   
   
   
   
   
   
   與聯立求解，將可求得
4. 模型求解
   先以來表示，可得通式
   及
   
   現在
   假設，且對所有的
   針對和
   現在計算兩個指標的數值，首先
   
   其次，
   
5. 說明分析結果
   鏟車送修的速率大約是修理廠所能負荷的60%，也就是說技術人員約有60%的時間花在維修的工作上，而平均一天可以在場間看到1.6台鏟車。