决策理论与方法-第6章序贯决策分析概要.ppt

* * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * 6.3 马尔可夫决策 三、稳态概率 称 为具有遍历性的马尔可夫链，常数 称为稳态概率。 如果对于所有的 ，存在与i无关的极限 6.3 马尔可夫决策 三、稳态概率 马尔可夫链遍历性判定定理 设 为有限状态齐次马尔科夫链， 为其一步转移概率矩阵，如果存在正整数s0，使得对于所有 ，有 则此马尔科夫链具有遍历性，且其稳态概率为方程组 在条件 下的唯一解。 6.3 马尔可夫决策 四、马尔可夫应用实例 例1 某产品厂商A为了与另外两个生产同类产品的厂家B和C竞争，有三种可供选择的措施：（1）发放有奖债券；（2）开展广告宣传；（3） 优质售后服务。三种方案分别实施以后，经统计调查可知，该类商品的市场占有率的转移矩阵分别是 6.3 马尔可夫决策 四、马尔可夫应用实例 已知三种商标的商品的月总销售量为一千万件，每件可获利1元。另外，三种措施的成本费分别为150万，40万，30万。为长远利益考虑，厂商A应该采取何种措施？ 6.3 马尔可夫决策 四