大数据时代背景下统计数据质量的评估方法及适用性分析.docxVIP

??

?

??

大数据时代背景下统计数据质量的评估方法及适用性分析

?

??

?

?

?

?

?

?

?

???

?

?

?

?

?

祝君仪

（上海大学理学院，上海200444）

[摘要]阐述了大数据时代的统计数据特征和质量准确性需求，分析了包括逻辑规则检验、核算数据重估、计量模型分析、统计分布验证、调查偏差评估、多维评估延伸六种评估方法的概念特征以及适用性。为了适应大数据时代的发展需求，需要加强对统计数据质量评估方法的研究力度，进一步完善评估体系，实现中国统计研究的新变革。

[关键词]大数据；统计数据；准确性；评估方法；适用性

[DOI]10.13939/j.cnki.zgsc.2015.29.041

1大数据的出现与应对

1.1大数据的概念特征

大数据的概念从字面上可以理解为庞大的数据集合，当然，如今的数据早已不局限于单一的数值变化，而是在数字网络概念中彼此交叠幂次增长的非结构化信息统筹。根据IDC报告，我们可知全球数据量的惊人变化，2009年80万PB，2010年增幅达50%，达到了120万PB，至2011年跃至190万PB，激增的数据量印证着大数据时代的到来，见下图。

虽然对于大数据还没有约定熟成的理论定义，但是在本文中我们不妨直观地将其理解为涵盖数值数据和非结构化数据，并对其进行分析整合的海量数据集。

大数据的几项具有辨识度的特征，首先是