深圳问卷调查：如何控制在线问卷数据的质量-上书房信息咨询.pdfVIP

深圳问卷调查：如何控制在线问卷数据的质量 在对互联网产品进行的用户研究中,通过在线问卷收集数据是一个非常普遍的方式。在 线问卷,不受访问的环境限制, 回收速度很快,具有明显的优势。但是由于被访者没有相关的指 导,在设备存在差异, 回答的态度有不同等, 因此数据的质量能否得到保证, 是一个关键的问题。 数据质量绝对了数据是否具有科学性,是否可以代表用户,是否给出准确的研究结论。因此我 们要考虑对在线问卷的数据进行质量控制的具体的方法,保证问卷数据的质量。 我们为什么会需要进行在线问卷数据的质量控制? 用户在线回答问卷的过程中,会出现一些问题,总结起来有以下三类: 1、会发生答题点击失误的情况 2、会有理解错误导致错误回答的情况 3、会出现答题不认真敷衍的情况 前两种情况,属于客观必然发生的小概率事件,不易通过技术对数据进行质量控制,但是 出现的可能性小,可以忽略。而第三种情况,是用户答题态度有偏差,是可以通过 技术实现质 量控制,从而把有问题的数据发现并剔除掉。 如何发现有问题的问卷数据并剔除呢? 针对答题不认真的问卷数据,我们要怎么才能发现呢?可以通过以下三个层面。 1. 地雷题 我们第一种方法,也是最常用的方法,是通过在问卷中设置地雷题,并通过地雷题 的数据 来检验问卷数据的准确性。那么,什么是地雷题? 地雷题是问卷设计中验证用户回答态度认真与否而设计的题目。这类题目往往是 2 个, 对应出现的。也就是针对相同的问题以不明显有差异的方式在问卷中提问两次。如果被访者 回答对应出现的两道题目,给出了完全相反或者差异巨大的答案,那么可以在 一定程度上反 映,这个人回答问卷的态度不够端正,可以怀疑这个人的数据是不真实的。 例如:在某个问卷中,Q1 问题是:以下物品,请问您家拥有哪些?,其中有“汽车”选项。Q10 问题是:请问您家拥有以下哪些个人资产?,其中也有“汽车”选项。Q1 与 Q10 为地雷题,如 果被访者这两个题目在汽车这个选项的答案出现差异,认为是不合格 的数据。 地雷题应该如何设置? 地雷题是在问卷收集之前,就要设置好的,如果没有设置,也就没办法通过其来进行质控 了。同时需要注意,地雷题的设置也是有技巧的,针对选择题,两道地雷题之间的距离应该尽可 能大。因为被访者在回答问卷的时候,不一定记得清之前问题和选择的答案,如果地雷题之间 相隔很多题目,用户如果态度不端正,是很容易被甄别出来的。 2. 答题时间 通过答题时间的长短,我们可以知道很多被访者答题的情况: (1)总体问卷回答时长 (2)单个问题回答时长 (3)总体问卷/单个问题的平均回答时长 (4)整体问卷/单个问卷的时长离散程度 …… 通过以上这些时间数据,我们可以看到,一个被访者在正常情况下, 回答整个问卷或者单 个问题,他需要的一个时间大概是多久。如果回答问卷的平均需要 15 分钟的时间,而有的人 用了 1 分钟就回答完了,而有的人用了 2 个小时,那么就很说明问题了, 回答时间过长或过短 的被访者回答问卷存在一定的问题。 但是还有一种情况, 就是如果平均时间是 15 分钟,那么 3 分钟的是否是认真的回 答,40 分钟是否是不认真的回答呢?这个我们需要什么依据来判断吗?这就需要一个标准,稍 后我们来揭晓这个标准。 3. 题目选项个数 通过被访者回答问卷的多选题,选择的选项数量,也可以进行问卷数据的质量控制。如果 一被访者回答某个问题,所选择的选项明显多于或少于所有被访者回答这个问卷的平均选项 数,那么就要注意了! 我们可以看到,对于吃饭,喝饮料,吃水果这种日常