驿马车问题.PPT

Sec. 12. 第十二章 動態規劃 Dynamic Programming 章節大綱 前言 驛馬車問題 最短路徑問題 由前往後式動態規劃 計算效率 資源分配問題 設備更新問題 連續狀態問題 其他動態規劃應用 12.1 前言 動態規劃（dynamic programming；DP） 隱含式列舉法（implicit enumeration method） 適用於一系列相關決策的問題 求解過程 將「原問題」分為一系列「子問題」 由最容易的子問題開始求解，直到最後求解的子問題就等於原問題為止 在求解子問題時，會用到已經解的子問題的解，因此計算會簡化許多 動態規劃模式 三個部分： 最佳值函數（optimal value function；OVF）：用以表達各子問題的函數 遞迴關係（recursive relation；RR）：將子問題以其他子問題表示的公式 邊界條件（boundary condition；BC）：根據OVF定義，不必計算即可明顯得知的值 可加上第四個部分： 答案（answer；ANS）：以OVF表示要求解答案 DP的求解過程 一律均由BC開始，反覆代入RR，以求解OVF所代表的各子問題，直到子問題即為ANS為止 12.2 驛馬車問題 驛馬車問題（stagecoach problem） 淘金者要找出由城市1至城市n所有的路徑中，總保費最低的路徑（亦即，最安全的路徑） 驛馬車問題各城市間的路徑及保費： 驛馬車問題DP模式 驛馬車問題DP模式的圖示 階段變數（stage variable）：i 狀態變數（state variable）：s 範例12.1 /驛馬車問題 根據邊界條件： 根據遞迴關係： 範例12.1 /驛馬車問題 範例12.1 /驛馬車問題 最低的總保費為9 由最佳策略函數p（optimal policy function）可得最佳路徑為 (1-2-6-9-10) 範例12.2 /驛馬車問題的表格式計算 i =4 i =3 範例12.2 /驛馬車問題的表格式計算 i =2 i =1 12.3 最短路徑問題（無迴路網路） 迴路（circuit）： 有迴路的網路： 範例12.3 （無迴路網路的判斷） 12.3 最短路徑問題 DP模式： 圖示： 範例12.4 /無迴路最短路徑問題 找出由節點1至節點7的最短路徑 由p 值（見下頁）可追溯而得最短路徑為1-3-4-6-7 範例12.4 /無迴路最短路徑問題 12.4 由前往後式動態規劃 兩類DP： 由後往前式動態規劃（backward DP） N, N-1, …, 1 由前往後式動態規劃（forward DP） 1, 2, …, N Forward DP /無迴路最短路徑問題 模式： 圖示： 範例12.5 12.5 計算效率 考慮圖中的最短路徑問題，其兩類節點 第一類：9個節點，如： 需要兩個「加」及一個「比較」 第二類：6個節點，如： 需要一個「加」 DP和完全列舉法TE的比較 最佳性原則 最佳性原則（principle of optimality） 目前階段狀態下的最佳決策僅和目前的狀態相關，而和如何到達此狀態的決策過程無關 以計算的觀點而言，當計算某階段狀態的OVF時，可直接使用之前已得到的OVF 以範例12.5為例。節點5的OVF計算如下： 12.6 資源分配問題 資源分配問題（resource allocation problem） 總共有X單位的資源要分配給個活動，分配N個資源給活動會產生的收益，應如何分配這些資源才能獲得最大的總收益？ 數學規劃（整數非線性規劃）模式： 12.6 資源分配問題 DP模式： 圖示： 範例12.6 /警車資源分配 決定如何將這6輛警車分配給4個不同的管轄區 各管轄區在不同警車數量時的每月犯罪案件數如下表所示： 範例12.6 /警車資源分配 根據邊界條件，可得 根據遞迴關係，可得 範例12.6 /警車資源分配 … 根據p值，可得表中所示的3組最佳警車分配方式 12.7 設備更新問題 設備更新問題（equipment replacement problem） 未來N年期間是否應購買新的設備？若要購買，應於第幾年購買，才能獲致最低的總成本 相關係數如下： 12.7 設備更新問題 DP模式 範例12.7 /設備更新問題 N=6 範例12.7 /設備更新問題 計算如下（簡略）： 最佳解： 12.10 其他動態規劃應用 貨物裝載