根据调查目的设计的调查问卷是一种测量工具其质量高低对调查结果的真实性、适用性等具有决定性的作用。为了保证问卷具有较高的可靠性和有效性。在形成正式问卷之前,应当对问卷进行试测,并对试测结果进行信度和效度分析,根据分析结果筛选问卷题项,调整问卷结构,从而提高问卷的信度和效度。调查问卷的信度和效度是研究过程中必不可少的重要环节。信度和效度分析的方法包括逻辑分析和统计分析。

1.信度定义

信度( (reliability)又称稳定性或精确度。用以反映在相同条件下,对同一客观事物测量若干次,测量结果的相互符合程度或一致程度,说明数据的可靠性。当使用同一测量工具重复测量某一客观事物时所得结果的一致程度越高,则该测量工具的信度就越高。

信度包含两层含义:一是相同的个体在不同时间,以相同的泱量工具测量,或以复本测量,或在不同的情景下测量,是否能得到相同的结果,即测量结果是否随时间和地点等因素而变化;二是能否减少随机误差对测验结果的影响,从而能够反映测量工具所要测量的真实情况,即测量结果是否具有稳定性、可靠性和可预测性。一个好的测量工具必须是稳定可靠的,且多次测量结果应前后一致。

2.信度的分类

信度的分类通常可以分为以下4大类：

●重测信度( Test-retest Reliability)

●复本信度( Alternate- orm reliability)

●内部一致性信度( Internal Consistency Reliability)

●评分者信度 Scorer Reliability

2.1重测信度

重测信度是指用同样的测量工具,对同一组被调查者间隔一定时间重复测试,两次测试结果的相关程度。重测信度可以通过两种途径进行考察:

• 途径1：计算两次测试结果的相关系数,如果经过统计检验,相关关系有统计学意义,则认为测量工具的信度高,否则信度低。也有人提出,测量工具的重测信度可以接受的标准是两次测试相关系数在0.7以上
• 途径2：对两次重复测试结果进行两个相关样本差异的统计检验,如果差异有统计学意义,则认为测量工具的信度低,否则,信度高。

2.2复本信度

复本信度法是让同一组被调査者一次填答两份问卷复本,计算两个复本的相关系数。复本信度法要求两个复本除表述方式不同外,在内容、格式、难度和对应题项的提问方向等方面要完全一致,而在实际调查中,很难使调査问卷达到这种要求,因此采用这种方法者较少。

2.3分半信度

分半信度常用在不可能进行重复调査的情况下。其计算方法是将调查的条目分成两半,计算这两半测量结果的相关系数r,又称分半信度系数,以此为标准来衡量整个量表的信度。

分半信度是将调查项目分为两半,计算两半得分的相关系数,进而估计整个量表的信度。分半信度属于内在一致性信度,测量的是两半题项得分间的一致性。这种方法一般不适用于事实式问卷(如年龄与性别无法相比),常用于态度、意见式问卷的信度分析。在问卷调查中态度测量最常见的形式是5级李克特( Likert量表）。

2.4Cronbach's a信度系数

Cronbach’sQ系数是 Cronbach于1951年创立的,用于评价问卷的内部一致性。α系数取值在0到1之间,Q系数越高,信度越高,问卷的内部一致性越好

• Cronbach’s a系数不仅适用于两级记分的问卷,还适用于多级计分的问卷。
• a系数评价的是量表中各题项得分间的一致性,属于内在一致性信度系数。这种方法适用于态度、意见式问卷(量表)的信度分析。
• 低信度：a<0.3.5,中信度:0.35<a<0.70,高信度a>0.7，一般的，问卷a系数在0.75以上改问卷才具有使用价值。

2.5评分者信度

考察评分者信度的方法为,随机抽取相当份数的问卷,由两位评分者按记分规则分别给分。然后根据每份问卷的分数计算相关系数,航得到评分者信度。评分者信度也可以是一位评分者两次评分的相关系数。如果是多个评分者或位评分者两次以上的评分,可采用肯德尔和谐系数和 Kappa系数。肯德尔和谐系数用于等级资料, Kappa系数用于定性资料。