数据质量检查模块V2.0功能规范.docVIP

CALIS学位论文和特色库本地系统 数据质量检查模块V2.0功能规范 CALIS管理中心 2006年10月 一、概述 《CALIS OAI Record格式和发布规范》定义了“CALIS数据发布模式2”。对于该模式中的“数据质量检查模块V2.0”，本文给出了具体功能规范。 “数据质量检查模块V2.0”（简称“数据质量检查模块”）需作为学位论文或特色库本地系统的一个组成部分。该模块有两种使用方式： 方式1：该模块用于对“CALIS数据发布模式2”中的OAI记录文件（该文件遵循“CALIS OAI Record V2.0格式”，可以在同一条OAI记录中同时包含元数据和数字对象）进行校验。 方式2：本地系统在将数据送入OAI-DP之前，自动调用该模块对拟发布的元数据和数字对象进行质量检查和校验。 数据质量检查模块的使用者主要图书馆中学位论文或特色库本地系统的系统管理员或者数据管理员。 对于学位论文本地系统，需设置一个系统参数“论文必备性校验分界日期（CALIS__ETD_verify_sep_date）”，若某篇学位论文的“论文授予日期”大于等于指定该分界日期，则采用“CALIS学位论文元数据必备性规则2”进行校验，否则采用“CALIS学位论文元数据必备性规则1”进行校验。 二、界面规范 管理员首先使用本地系统的OAI文件导出模块进行OAI记录文件（遵循“CALIS OAI Record V2.0格式”）的导出。然后，管理员再使用“数据质量检查模块”对 OAI记录文件中的数据在数据格式、必备性、一致性等方面进行检查和校验。校验无误后，管理员才能将这些文件通过FTP上传，或者通过OAI-DP自动对外发布。 数据质量检查模块的界面应尽量简单易操作，提示信息明确。该界面至少应包含以下部分： oai记录文件夹（文件名）输入框，可以手工输入要检查文件存放的文件夹或文件名。 oai记录文件夹选择按钮，可以用可视对话框的方式选择要检查的文件夹或文件 oai文件检查按钮 结果提示文字框 数据质量检查模块的界面如下图所示： 图1：数据质量检查模块V2.0的界面示意 【特别注意】 对于学位论文本地系统，参数CALIS__ETD_verify_sep_date（论文必备性校验分界日期）应能由管理员统一配置。 三、功能规范 “数据质量检查模块V2.0”对于“CALIS数据发布模式2”的OAI记录文件进行校验时可能会发现一些错误，这些错误提示应遵循《CALIS学位论文和特色库本地系统的数据质量检查模块的错误代码规范》规范。 “数据质量检查模块V2.0”对OAI记录文件的校验分为以下两种情形： 用于对OAI记录文件进行校验； 与本地系统联动，用于对OAI-DP中即将发布的OAI记录数据进行校验。 3.1对OAI记录文件的校验 对“OAI记录文件”，按照“CALIS OAI Record V2.0格式”要求进行校验，该校验工作包括以下几个方面： 对OAI Record文件名称的校验 文件名称是否采用以下拼接形式生成： “完整的MetaID” ＋ “@” ＋ “导出时间戳” ＋ “.oai.xml” ——这种校验的错误代码为01002A。 “完整的MetaID”部分是否采用以下拼接形式生成： “仓储标识” ＋ “-” ＋ “本地应用系统前缀” ＋ “/” ＋ “本地元数据标识” ——这种校验的错误代码为01003A。 “完整的MetaID”部分是否进行了application/x-www-form-urlencoded MIME格式转换，型如： oai%3A211011.%3Aetd-dr%2FA1002 ——这种校验的错误代码为01003B。 “导出时间戳”部分是否为型如“2005-01-01T10:02:30Z”的20位零时区时间格式 ——这种校验的错误代码为01004A。 “导出时间戳”部分是否进行了application/x-www-form-urlencoded MIME格式转换，型如： 2005-01-01T10%3A02%3A30Z ——这种校验的错误代码为01004B。 OAI Record文件名称是否型如： oai%3A211011.%3Aetd-dr%2FA1002@2005-01-01T10%3A02%3A30Z.oai.xml ——这种校验的错误代码为01002B。 对OAI Record文件的内容进行校验 用Record Schema（record.xsd）校验XML文件是否合法，schema地址为： /metadata_ns/oai/record/record.xsd ——这种校验的错误代码为01009。 取出record-header-identifier下的