电话概率样本中的无应答和偏差趋势

2018年10月

几乎自从电话调查的普及以来,参与电话调查的人数一直在下降, 2000).

它们降到了多低的水平,有什么影响?  彩票平台还能相信电话调查的结果是有效和可靠的吗?

反应率的趋势

在参与率下降方面, Curtin and colleagues measured response over time in the Survey of Consumer Attitudes (2000; 2005), 报告回应率在1979年为72%,2003年为48%, 两个时间点之间有相当线性的趋势.  在科廷等人之前. article, Steeh(1981)研究了20世纪50年代初到1979年的全国选举调查和消费者态度调查中的反应.  她的研究不出所料地发现,在这段时间内,无反应的人数显著增加.  在他1992年的文章中,布拉德伯恩在20世纪80年代继续呈现出同样的趋势.  重要的是, 应对措施的下降是地方性的, 跨越行业和调查类型(Brehm, 1994). 整体, 研究表明,从20世纪70年代到2000年,无反应的情况一直在增加(Singer, 2006).

最近, 美国国家研究委员会(National Research Council)在其2013年的无反应报告中,将许多趋势延伸至2011年。.

例如, the National Health Interview Survey response rates declined for their sample adult module from 80 percent to 66 percent from 1997 to 2011; the General Social Survey from 83 percent to 70 percent from 1975 to 1993; the National Household Education Survey from 81 percent to 53

percent from 1991 to 2007; the National Immunization Survey from 87 percent to 64 percent from 1995 to 2010; and the BRFSS from as high as 65 percent to the mid-30 percent range from 1996 to 2010.

值得注意的是, 以上引用的研究都是非常努力的, 高反应率研究, 其中很多都利用了面对面的面试设计, 只报告到2010年的趋势.

那么最近的政策研究调查或更典型的民意调查呢?  皮尤研究中心在他们自己的研究中报告了趋势, 结果显示,从1997年到2012年,回应率从35%下降到9%(皮尤研究中心, 2012).

加州健康访谈调查成人模块回应率从2001年的38%下降到2017年的8%.  以及消费者态度调查, 在2003年达到了48%, 现在的回复率是个位数.

哥伦比亚广播公司的民意调查回复率从1999年的19%下降到2015年的5%(使用AAPOR的RR1, 一个比传统RR3计算更保守的估计), 美国广播公司的民调从1997年的28%下降到2018年的9%.

偏见的趋势

重要的是, 在评估较低的调查回应导致调查偏差的程度时,几乎完全发现了无效效应.

Keeter和同事(2000)篡改了一份高回复率的调查(61%),并删除了难以接触到的案例,以生成对相同数据的低回复率的调查(36%).  这使他们能够直接比较自己的测量结果,而不用担心测量误差或其他潜在的混淆.

他们发现调查的高回复率版本和低回复率版本之间几乎没有显著差异.  2006年本研究的复制和扩展(Keeter et al, 2006年)发现了基本相同的结果, 一项调查的回复率为50%,而另一项调查的回复率仅为25%.  Groves和Peytcheva(2008)使用元分析方法来调查无反应, 利用59个不同程度的努力和响应的调查.

响应和质量的度量, 例如使用预先通知, 对偏见没有显著影响吗.

这在本质上与Groves(2006)的其他研究相似。, 也发现不回应对偏见的影响很小.

自21世纪初以来的研究很少.

Dutwin和Buskirk(2017)发现,与全国健康访谈调查相比,回复率低于10%的调查显示出的偏差很小, 一种能够获得70%以上回应率的面对面设计.

在另一篇论文, Dutwin和Buskirk(2018)研究了1996年至2015年的调查偏差趋势,通过将较低的回复率调查估计与美国官方的基准进行比较,发现了电话调查偏差的三个一般阶段.S. 人口普查的标准:

  • 1996年至2004年期间进行的调查偏倚水平较低;
  • 从2004年到2007年的偏差增长时期;
  • 3)自2007年以来的偏倚下降时期(见下表).

目前,2016年的偏差估计与“第二阶段”增长开始之前的水平相当.

作者认为,21世纪头十年中期的偏见似乎与设计问题更有关系, 即通过手机接触到的受访者的代表性不足, 比无反应的产物.

事实上, 在此期间进行了大量手机采访的研究表明,随着时间的推移,偏见没有增加的趋势.

参考文献

Bradburn,诺曼(1992). 对非响应问题的响应. 1992年总统演讲. 舆论调查与舆论调查.

Brehm,约翰(1994). 踩着彩票平台的脚趾头进门? 之前的联系、奖励和调查回应改善了对调查的回应. 国际舆论研究,6 (1):45-64.

砖J. 迈克尔 & Tourangeau罗杰,2017. “为减少无反应偏见而设计的响应式调查”,《手机彩票平台》, Sciendo, 卷. 33(3), 735-752页,9月.

科廷,R.普雷斯、斯坦利和辛格的《手机彩票平台》(2000). 回复率变化对消费者信心指数的影响. 舆论季刊64:413-428.

科廷,理查德,普雷斯,斯坦利和辛格,埃莉诺(2005). 在过去的四分之一个世纪里,电话调查的无应答的变化. 季刊69 (1):87-98.

Dutwin D和Buskirk T. (2017). 苹果vs橘子,春晚vs黄金美味?:比较非概率网络样本与低响应率概率样本的数据质量. 《手机彩票平台》,第81卷,第S1期,2017年4月1日,213-239页, http://doi.org/10.1093/poq/nfw061

Dutwin D.布斯柯克,T. (2018). 电话抽样调查:深爱或即将离去的人? 回复率下降的年龄调查错误的趋势. 同行评议的未发表的手稿.

林,罗伯特M. (2006). 家庭调查中的无应答率和无应答偏差. 舆论调查,70 (5):646-75.

林,罗伯特. M. 和Peytcheva, Emilia (2008).  无应答率对无应答偏差的影响. 公众舆论季刊72:167-189.

基特,斯科特,米勒,卡罗琳,科胡特,安德鲁,格罗夫斯,罗伯特M.,和Presser, Stanley (2000). 在大型全国电话调查中减少无应答的后果. 《手机彩票平台》,67:125-48.

 Keeter, Scott, Kennedy, Courtney, Dimock, 迈克尔, Best, Jonathan,和Craighill, Peyton (2006). 通过全国RDD电话调查评估越来越多的不回应的影响. 舆论调查,70 (5):759-779. 

皮尤研究中心(2012年).  评估民意调查的代表性. 访问http://www.人民出版社.org/2012/05/15/assessing-the-representativeness-of-public-opinion-surveys/. 

皮克特, 贾斯汀, 再分析杜朗高(2017)和Brick and Tourangeau(2017):手机彩票平台无反应偏差的研究报告(9月24日), 2017). 可在SSRN: http://ssrn下载.com/abstract = 3042254或http://dx.doi.org/10.2139 / ssrn.3042254

银,内特(2014). 民意调查行业是停滞不前还是陷入危机? (2014年8月25日). 从http://fivethirtyeight获取.com/features/is-the-polling-industry-in-stasis-or-in-crisis/.

歌手,埃莉诺(2006). 引言:家庭调查中的无应答偏差. 舆情研究进展(2):1 - 5.

Steeh,夏绿蒂克. (1981). 1952-1979年无反应率趋势. 公众意见季刊45:40 - 57.

Roger Tourangeau和Thomas J . Plewes. (eds. 2013). 社会科学调查中的无应答:一个研究议程.  美国国家科学院国家研究委员会的一份报告. Washington, DC; National Academies Press.

手机彩票平台作者

想要更多的信息?

友情链接: 1 2 3 4