国家自然科学基金重点项目.ppt

国家自然科学基金重点项目虚拟现实中基于图像的建模和绘制（编 汇报人：石教英 浙江大学CADCG国家重点实验室 二零零五年五月 目 录 项目总报告 石教英课题组总结 项目总报告 一、项目概况 二、项目研究背景、目标与内容 三、项目成果统计 四、四年来研究工作主要成果概述 石教英课题组总结 一、基于图像的建模（IBM）技术 二、基于图像的绘制（IBR）技术 三、基于预计算及采样的实时高真实感图 像的绘制技术 四、统一数字几何处理框架研究 一、项目概况 项目名称： 虚拟现实中基于图像的建模和绘制 项目负责人： 石教英，浙江大学 项目承担单位和学术领导人： 浙江大学石教英教授和彭群生教授， 中科院自动化所胡占义研究员， 软件研究所吴恩华研究员 起止年月：2001年1月至2004年12月 资助金额：110.00万元 四年已到款金额：110.00万元 经费结余金额：4万元 二、研究背景，目标与内容(1) 项目的研究背景 虚拟现实(VR)技术是信息领域的前沿，对视觉建模和绘制的真实感和实时性有很高的要求 计算机图形学面临的两大挑战：高度真实感，实时性 IBMR（基于图像的建模和绘制）是1990年代初提出的新兴研究方向，鲜明特点： 具有高度真实感和较好的实时性 缺乏几何信息 二、研究背景，目标与内容(2) Traditional Computer Graphics Input: Geometry, Material Properties (Color, Reflectance,…etc.), Lighting. Transformation and Rasterization. Computer Vision methods to recover models. 二、研究背景，目标与内容(3) Top Level Survey 二、研究背景，目标与内容(4) 二、研究背景，目标与内容(5) Why IBR? Problems of triangle-based graphics: Always starts from scratch. Millions of sub-pixel triangles. 二、研究背景，目标与内容(6) 项目的研究目标 采用基于图像的建模技术来替代传统的建模，以及采用图像空间变换操作来替代传统的图形绘制过程，试图解决VR建模复杂度，绘制速度及绘制质量等相互制约的矛盾 研究IBMR的基础理论和算法 二、研究背景，目标与内容(7) 项目的研究内容 基于图像的三维场景表示及漫游 基于像素采样点的光照属性和表面几何重建 虚拟景物与现实场景画面的无缝合成 IBMR采样图像的实时、高效压缩和存取 IBMR场景图像采样方法和技术优化 实现一个在CAVE环境下的IBMR实时漫游系统 三、项目成果统计(1) 四年来已发表论文统计 三、项目成果统计(2) 2. 人才培养统计 毕业博士生 23名 年均培养毕业博士生 5.75名 毕业硕士生 14名 年均培养毕业硕士生 3.5名 博士生平均发表论文 125篇/23名 = 5篇 四、四年来研究工作主要成果概述(1) 1、杰出成果简介 本项目推动了我国计算机图形学与计算机视觉两个学科的交叉研究，取得了一批瞩目的成果。 四、四年来研究工作主要成果概述(2) 1、杰出成果简介 （1）在摄像机外参数标定的PnP问题上纠正了前人一直认为的基于距离的PnP问题和基于变换PnP问题相互等价的错误结论；深入研究了PnP 多解的几何分布问题。在摄像机自标定这一国际研究热点问题上，证明了对变参数摄像机仅仅知道平移运动不足以达到仿射重建，纠正了存在于学术界长达十余年的错误结论；提出多种基于主动视觉的摄像机自标定理论和算法，包括新的线性摄像机自标定方法和基于射影重建的摄像机自标定方法等。有多篇论文发表在IEEE Trans. PAMI，Pattern Recognition Letters , Image and Vision Computing 及国内一级学报上。 四、四年来研究工作主要成果概述(3) 1、杰出成果简介 （2）国际上首次解决了基于（深度）图像自动重建基于点与平面混合表示模型的复杂虚拟场景的技术难题，提出一系列创新算法有：能自动地将庞杂输入数据划分为点与平面模型的像素分类算法；基于Jacobi矩阵的采样密度比较算法；重建平面的空洞分析和预填补算法；针对基于点表达的物体的局部重建和重采样算法以及针对点面混合表达的实时漫游算法等。该项工作作