电话面试在美国的现状

有未来吗??

在美国的电话面试.S. 已经享受了几十年的黄金时代.

该年龄的特征是有效样品[1], 适度,即使有时不是很高的参与, 和简单的, 广泛的报道[3].  不幸的是,那些日子已经过去了.  今天, 效率较低, 参与率明显下降, 而覆盖可以通过拨打两个帧(固定电话和手机)来维持.  结果,成本大幅增加.  除了, 鉴于参与人数下降和最近选举投票面临挑战,许多人质疑电话点位估计的准确性.

但并非所有的消息都是坏消息.

最近的数据显示,随着参与度等关键指标的下降趋势趋于平缓,彩票平台可能已经度过了这场风暴.  对电话样本质量的实证研究发现,尽管参与人数下降, 电话样本的数据质量仍然非常高,远远优于其他成本较低的替代方案,如非概率在线样本[4].

虽然很难预测未来,因为最近的过去发生了如此多的变化, 目前的指标表明,电话面试, 尽管较低的参与率仍然是一个强有力的选择,研究需要相对准确的点估计和/或情绪和意见的评估.

本白皮书将简要介绍电话研究的过去, 现在, 和未来的, (三)对上述各段规定的要点进行阐述.

In 2016, David Dutwin和Paul Lavrakas[5]发表了一项研究的结果,该研究基于美国9个最大的调查组织的数据.S.

他们发现座机电话无法使用, 拒绝, 从2008年到2015年,没有回答的比例都显著增加.  而在2009年,彩票平台花了大约20个座机样本记录才完成了一次通话, 2015年增加了46个样本记录.  在手机, 然而, 事实远没有那么可怕:拒签率没有变化, 非工作人口比例在下降, 虽然没有回答的比例显著上升.  总的来说,2009年的一次手机采访采集了22份样本记录,2015年是25份.

这一分析得出的结论也反映了其他人的发现, 固定电话的参与率和效率一直在稳步下降, 但手机上的这些指标只是略有下降, 根据皮尤[6]和其他机构的报告, 自2014年以来相对没有变化吗.  因为现在70%以上的采访都是通过手机进行的, 而且通过手机获得的采访份额每年都在持续增长, 有证据表明,电话采访的成本正在趋于平缓,在成本和参与方面,不久的将来电话采访不会比最近的过去更糟.

当然, 一种比较普遍的看法是,电话调查的参与率比过去低得多, 数据质量, 专门和准确性, 电话研究的数量一定有所下降, 说到点子上, 也许, 这并不比一个非概率的在线小组所能得到的结果好多少.  经验证据表明,电话研究, 即使回复率较低,也保持了与回复率高得多时相同的质量和准确性.  这一证据还表明,电话研究数据比在线小组等其他替代模式更类似于严格的面对面调查数据.

这些研究中最著名的是本白皮书的脚注4.  但有几个特别值得注意.

沃克和同事们研究了广告研究基金会的一项名为“质量基础2”的研究,该研究对17个在线小组进行了比较,并对各种各样的指标进行了电话调查.

最常被引用的例子之一是吸烟的流行, 在那里,电话样本的发病率达到了18%(官方的政府统计数据显示美国的吸烟率.S. 那时我17岁.5%),而在线样本得到的估计值则大不相同,从19%到33%不等.  Dutwin and Buskirk(2017)尝试用包括样本匹配在内的多种调整技术来“修正”在线样本, 倾向权重, 和标准校准(倾斜), 他们发现,与电话样本相比,在线样本的估计偏差是前者的两倍,方差是后者的三倍, 电话样本的偏倚率仅比面对面样本略高.

另一个角度是观察电话数据在一段时间内的变化,看看它是否真的在时间上退化了.  Dutwin和Buskirk (2017, )分析了CBS进行的每一项研究, 美国广播公司, 皮尤研究中心从1996年到2015年.  他们研究了在一系列互动人口统计数据(非裔美国人的百分比)中,每次民意调查的偏见程度, 例如, 有研究生学位的人, 或者按年龄分组的从未获得高中文凭的人的百分比).  They found three periods of bias in unweighted telephone samples: bias was flat from 1997 to 2004; bias increased from 2004 to 2007 and then flattened; and since 2011 has declined on an annual basis.  目前对偏差的估计类似于10年前的水平,而且仍在下降.  加权电话偏倚随时间变化而不变, 与昂贵得多(未经加权)的个人数据相似.  作者发现,从2004年到2007年,偏见的增加几乎可能是由于覆盖偏见,当调查研究人员未能获得大量的手机采访, 但相当多的美国人已经抛弃了他们的座机电话.  因为研究人员通过手机进行了足够数量的采访, 偏见显著下降.

最后一个观点来自政治民调机构.

关注当前的选举投票与过去几年相比可能出现更大的偏见, Nate Silver在[7]上报道了州长的错误, 参议员, 过去20年的总统选举都是如此.  他发现,政治投票中的错误在那段时间里没有改变.  事实上, 尽管2016年大选刚结束,新闻头条就出现了, 它将在全国范围内展开, 民意调查预测民众投票的准确性高于历史上平均的[8].  总的来说,就像其他人同样报告[9]一样,电话调查和以往一样准确.

所以:电话面试要去哪里?  过去,某些电话指标变化很快.  例如, 当时TCPA立法强制电话调查机构手动拨打手机号码, 成本一夜之间就增加了.  这使得预测未来变得有点危险.  也就是说, 这种趋势表明,电话面试将继续存在, 至少要再久一点, 也许是长期的.  虽然电话面试的成本确实增加了,但有什么是清楚的呢, 在美国,没有比电话调查质量更便宜的替代品了.

脚注:

[1] 20世纪70年代,列表辅助RDD简单随机样本的出现和普及大大提高了抽样效率,相比于对所有可能的工作电话号码库的抽样. 

[2]从20世纪70年代到21世纪初,回应率在30%到60%之间.

在手机普及之前,超过98%的家庭拥有固定电话.

[4] See Chiang and Krosnick, 2009; Dutwin and Buskirk, 2017; Malhotra, & Krosnick, 2007; Walker et al, 2010; Yeager et al., 2011.

[5]电话调查结果趋势,2008 - 2015,调查实践,2016,9(3). David Dutwin和Paul Lavrakas

[6] http://www.pewresearch.org/2017/05/15/what-low-response-rates-mean-for-telephone-surveys/

[7] http://fivethirtyeight.com/features/is-the-polling-industry-in-stasis-or-in-crisis/          

这并不是否认改善政治投票需要努力, 特别是在州一级.  有关更多信息,请参阅AAPOR 2016年大选报告: http://www.aapor.org/Education-Resources/Reports/An-Evaluation-of-2016-Election-Polls-in-the-U-S.aspx

[9]再次看到 http://www.pewresearch.org/2017/05/15/what-low-response-rates-mean-for-telephone-surveys/

[10]以同样的方式, 如果FCC将来为电话研究提供一个例外的话, 成本也可以同样迅速地大幅降低. 

想要更多的信息?

友情链接: 1 2 3 4