一种基于owl的语义网数据划分与并行加载方法-中国云计算.pdfVIP

第24卷摇 第2期 计 算机 技 术 与发 展 Vol.24摇 No.2 2014年2月 摇 摇 摇 摇 摇 摇 摇 摇 摇 摇 COMPUTERTECHNOLOGY AND DEVELOPMENT摇 摇 摇 摇 摇 摇 摇 摇 摇 摇 Feb.摇 2014 一种基于OWL 的语义网数据划分与 并行加载方法 程摇 佳,朱摇 敏,柏文阳 (南京大学计算机软件新技术国家重点实验室,江苏 南京210023; 南京大学计算机科学与技术系,江苏 南京210023) 摘摇 要:随着语义网数据规模的爆炸式增长,海量数据存储和检索面临越来越严峻的挑战,分布式数据库与并行计算已成 为其主要解决方案。 基于列存储分布式数据库HBase设计了一种多表语义网数据存储模型,实现从 OWL本体定义到存 储模型的映射。 基于OWL本体定义信息对语义网数据实现按类划分,并将三元组存储于主体所属于的类的两张表里,采 用MapReduce框架实现并行的数据划分和加载任务,最后在Hadoop集群环境下对方法进行了可行性验证。 关键词:语义网;网络本体语言;列存储;并行计算 中图分类号:TP391摇 摇 摇 摇 摇 摇 文献标识码:A摇 摇 摇 摇 摇 摇 摇 文章编号:1673-629X(2014)02-0019-06 doi:10.3969/ j.issn.1673-629X.2014.02.005 A Method of Semantic Web Data Division and Parallel Loading Based on OWL CHENG Jia,ZHU Min,BAI Wen-yang (State Key Laboratory for Novel Software Technology,Nanjing210023,China; Department of Computer Science and Technology,Nanjing University,Nanjing210023,China) Abstract:With therapidgrowthofsemanticWebdatascale,massdatastorageandretrievalarefacinggrowingchallenges,anddistributed database and parallel computing has become its major solutions.Design a multi-table storage model to store semantic Web data with HBase which isa distributed databasebased on column store,asto achieve a mapping from OWL ontology to storage model.And then, divide semantic Web data by classwhich the subject of itstriplebelongstoand storethetripleintothetwoHTablesoftheclass.Divide and load data in parallel by MapReduce framework.Finally,verify the feasibility of thismethod in the Hadoop cluster. Key words:semantic Web;OWL;column-store;parallel computing 0摇 引摇 言