对数透视法在信息检索结果评价中应用探究.doc

对数透视法在信息检索结果评价中应用探究 　　〔摘要〕信息检索评价得到了学者们的广泛研究，而从用户认知的角度来对其进行研究逐渐成为学者们追捧的热点。本文从用户认知的角度出发，借助布鲁克斯提出的对数透视法思想，对目前比较常用的评价指标进行了改进，将物理世界（“世界1”）中的评价指标通过“对数尺”转换到了“世界2”和“世界3”的精神世界，从用户所获取的情报量对其检索结果进行了评价，克服了以文献数量为计量单位评价的不足。同时，通过应用分析对其改进的评价指标进行了说明。最后提出了本研究的不足和需要改进的地方 〔关键词〕对数透视法；信息检索；评价指标；用户认知 DOI：10.3969/j.issn.1008-0821.2017.01.012 〔中图分类号〕G252.7〔文献标识码〕A〔文章编号〕1008-0821（2017）01-0066-05 〔Abstract〕Information retrieval evaluation has been widely researched to scholars，the research from the perspective of cognitive has gradually become a hot pursuit of the scholars.Based on logarithmic law proposed by Brooks，this paper made some changes to commonly used evaluation index，from the perspective of user cognition，change evaluation measures in material“world 1”to spiritual“world 2”and“world 3”by logarithmic law，evaluated result by information amount instead of the number of documents.At the same time，the article did a application analysis to explain the changes and pointed out the deficiency and what should do at last. 〔Key words〕logarithmic law；information retrieval；evaluation measures；user cognition 信息检索评价得到了学者们的广泛研究，最常用的评价指标包括召回率、准确率、P@N（Precision at rank N）、AP（Average Precision）、MAP（Mean Average Precision）、NDCG（Normalized Discount Cumulative Gain）等[1-3]。上述评价标准大多（除NDCG外）是以所检索出文献（档）的数量作为计量单位，并在此基础上形成常用的评价指标，同时，这些评价指标仅仅针对二元相关性，要么相?P，要么不相关。NDCG方法的出现弥补了二元相关评价方法的不足，它能够系统地结合文档排序和相关性得分，可以说是对文档满足用户需求的情况进行了考虑。用户在信息检索过程的认知行为是检索评价的重要依据，但由于认知行为的隐蔽性和不确定性，传统的评价指标对其考虑较少。因此，可从用户认知角度出发，对传统评价指标进行改进，力求最大程度衡量用户检索过程的满足感。布鲁克斯情报学认知观范式，对情报学发展起到了重要的影响推动作用，其思想不断地被使用、推广、延伸和完善。通过他提出的对数透视法，我们将尝试通过“对数尺”将物理世界的“硬”评价转化到精神世界的“软”评价。本文基于此展开研究，在相关研究的基础上，对对数透视法理论进行了较为全面的梳理和分析后，对传统的信息检索评价指标进行了改进，并通过相关的应用对其进行了说明 1相关研究 1980年，英国著名情报学家布鲁克斯发表了一组《情报学的基础》论文，提出了当前情报学研究的现状和特点，并较宏观地介绍了一些定量性的研究方法。比如，情报学的任务是探索和组织客观知识世界（“世界3”），提出了对数透视法、情报学基本方程等。对于对数透视法，布鲁克斯指出解决物理现象所采用的计算方法，应用于精神现象以及情报过程的定量化时要采取修正的方法，这种修正方法就是利用对数透视法来加以变换，不能简单地用物理数据来度量认知范围的问题，应当进行相应的变换[4]。信息检索结果评价中，传统的查准率和查全率衡量指标是布鲁克斯称之为物理现象采用的计算方法，它忽略了不同用户的信息需求和满足程度，必须