基于DRJMCMC方法处理正态混合模型-概率论与数理统计专业论文.docxVIP

I／ll[IflI I／ll[IflI llttl llllIlllfllll[I IIrl lf II fill Y1 908890 Universit)ofversity of Sciecience andand-echnoloqyTechnol(gy of hIna A dissertation for Master’S degree Lea rn i n g t h e G au ss i a n M ixtu re ModeI Based on DRJ MCMC Method Author’S Name：Dongwei Wei Speciality：Probability＆Mathematical Statistics SuI ：Prof．Baiqi： Prot 1 lao Finished Time： May 26th，201 l 中国科学技术大学学位论文原创性和授权使用声明本人声明所呈交的学位论文，是本人在导师指导下进行研究工 中国科学技术大学学位论文原创性和授权使用声明 本人声明所呈交的学位论文，是本人在导师指导下进行研究工 作所取得的成果。除已特别加以标注和致谢的地方外，论文中不包 含任何他人已经发表或撰写过的研究成果。与我一同工作的同志对 本研究所做的贡献均已在论文中作了明确的说明。 作为申请学位的条件之一，学位论文著作权拥有者授权中国科 学技术大学拥有学位论文的部分使用权，即：学校有权按有关规定 向国家有关部门或机构送交论文的复印件和电子版，允许论文被查 阅和借阅，可以将学位论文编入《中国学位论文全文数据库》等有 关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存、 汇编学位论文。本人提交的电子文档的内容和纸质论文的内容相一 致。 保密的学位论文在解密后也遵守此规定。 ／ 口公开 作者签名：j㈤ 导师签名： 签字日期：塑止区!兰 签字日期：驯。f口 摘 摘 要 摘要 我们运用带延迟拒绝的可逆跳马尔科夫链蒙特卡洛方法(DRJMCMC)来研究 一元和多元混合正态模型的参数估计和模型选择问题．在混合元的分裂和合并过 程中，我们依然遵照转移前后模型的一阶和二阶矩不变的原则，同时引进随机 产生的正交阵解决协方差矩阵不同的问题．我们还给出DRJMCMC算法在一元和 多元正态混合模型中的接受概率的具体表达式．这里我们给出了一些模拟数据的 结果来验证这个算法的可行性及优良性． 关键词：混合模型，模型选择，EM算法，MCMC算法，带延迟拒绝的RJMCMC算 法，分裂和合并过程 ABSTRACTABSTRACT ABSTRACT ABSTRACT We present the Bayesian analysis of the multivariate Gaussian mixture model US- ing the delaying rejection reversible jump MCMC algorithm，which can deal with pa— rameter estimation and model selection jointly in a signal sweep．We still follow the constraints of preserving the first two moments before and after the split and combine moves and generate the special orthogonal matrix to solve the problem of constructing the covariance matrix．The acceptance probability related in the DRIMCMC algorithm is given in the paper．Experimental results on several data sets demonstrate the efficacy of our algorithm． Keywords：Mixture model，Model selection，EM algorithm，MCMC algorithm，De- laying rejection reversible jump MCMC algorithm，Split and combine moves． III 目录目 目录 目 录 摘要 ． I ABSTR ACT III 目录 ．V 第1章绪论 ．．1 1．1 混合模型的定义 1 1．2混合模型的研究进展 ．． 1 1．3本文主要工作 ．． 2 第2章相关知识 3 2．1 MCMC算法 ．3 2．1．1 MCMC算法的基本思路