面向视听跨媒体检索的神经认知计算模型研究.pdfVIP

第 42卷 第 3期 计 算 机 科 学 Vo1．42No．3 2015年 3月 Computer Science M ar2015 面 向视听跨媒体检索的神经认知计算模型研究 刘 扬 “ 涂春龙。 郑逢斌 (河南大学空间信息处理实验室 开封 475004) (河南大学环境与规划学院 开封 475004)。 (浙江大学生物医学工程系 杭州t310027)。 (河南大学计算机与信息工程学院 开封475004) 摘 要 跨媒体语义映射和跨媒体语义检索是跨媒体搜索引擎的核心技术问题。对视听神经认知的功能、层次和结 构进行了分析，借鉴深度信念网络和时空层次记忆模型的设计思想，建立了一种仿脑的面向视听跨媒体应用的神经认 知计算模型。依据神经系统的信息处理机制和认知理论的功能架构来设计可计算模型，系统地讨论 了皮层柱的视听 信息整合机制和协同认知的处理流程。本模型可为解决跨媒体语义映射和跨媒体语义检索的相关应用提供借鉴和参 考，对实现非冯 ·诺依曼结构的仿脑认知计算进行了一次有意义的探索。 关键词 媒体神经认知计算，跨媒体语义检索，跨媒体语义映射 ，认知计算，仿脑计算 中图法分类号 TP391 文献标识码 A DOI 10．11896／]．issrL1002—137X．2015．3．004 Research ofNeuralCognitiveComputingM odelforVisualandAuditoryCross-mediaRetrieval LIU Yang，。’ TU Chun-long。 ZHENG Feng-bin ’ (LaboratoryofSpatialInformationProcessing，HenanUniversity，Kaifeng475004，China) (CollegeofEnvironmentandPlanning，HenanUniversity，Kaifeng475004，China) (DepartmentofBiomedicalEngineering，ZhejiangUniversity，Hangzhou310027，China)0 (CollegeofComputerScienceandInformationEngineering，HenanUniversity，Kaifeng475004，China) Abstract Cross—mediasemanticmappingandcross～mediasemanticretrievalarekeyproblemsofthesearchengine．In thispaper，weanalyzedthefunctionality，thehierarchyandthestructureofthebrain’sneuroeognitive，andestablisheda in-likeneuralcognitivecomputingmodelforvisualandauditorycross—mediaapplicationaftertaking intoaccountthe ideaofdeepbeliefnetworkandhierarchicaltemporalmemory．Accordingtothemechanism ofinformationprocessingin centralnervoussystem andframeworkoffunctionalapproachincognitivetheories，wedesignedcomputationalmodel， anddiscussedsystematicallyinformationintegrationmechanism incorticalcolumnandcooperativecognitiveprocessing