跳到主要内容

感谢您访问nature.com。您使用的是对CSS支持有限的浏览器版本。为了获得最好的体验,我们建议您使用最新的浏览器(或关闭Internet Explorer的兼容性模式)。同时,为了确保持续的支持,我们将在没有样式和JavaScript的情况下显示站点。

解决单一问题的群体智慧问题

摘要

一度被认为是挑衅1在美国,群体智慧高于个人的观念本身已经成为一种群体智慧,导致人们猜测,在线投票可能很快会让有资格的专家失业23..最近的应用包括政治和经济预测45,评估核安全6、公共政策7,化学探针的质量8,以及对不安宁火山的可能反应9.从人群中提取智慧的算法通常基于民主投票程序。它们易于应用,并能维护个人判断的独立性10.然而,民主方法有严重的局限性。他们偏向于肤浅的、最低公分母的信息,而牺牲了没有被广泛分享的新颖或专业知识1112.基于测量置信度的调整不能可靠地解决这个问题13.在这里,我们提出以下民主投票的替代方案:选择比人们预测的更受欢迎的答案。我们证明,在对选民行为的合理假设下,这一原则产生了最佳答案,而标准的“最受欢迎”或“最自信”原则在完全相同的假设下失败。像传统的投票一样,这一原则也适用于独特的问题,比如关于科学或艺术价值的小组决定,以及法律或历史争议。因此,潜在的应用领域比机器学习和心理测量方法所涵盖的更广泛,后者需要多个问题的数据14151617181920.

这是订阅内容的预览,通过你所在的机构访问

相关的文章

引用本文的开放获取文章。

访问选项

买条

在ReadCube上获得时间限制或全文访问。

32.00美元

所有价格均为净价格。

图1:来自研究1c的两个示例问题,有文字描述。
图2:为什么“意外流行”的答案应该是正确的,由费城和哥伦比亚问题的简单模型和贝叶斯受访者说明。
图3:研究4中被调查者判断20世纪艺术品市场价格的刺激因素选择。
图4:本文所讨论研究的聚合算法结果。
图5:Logistic回归显示了艺术品被判断为昂贵(高于30,000美元)的概率作为实际市场价格的函数。

参考文献

  1. 高尔顿,大众之声。自然75, 450-451 (1907)

    文章广告谷歌学者

  2. 桑斯坦,C。《信息乌托邦:多少心灵产生知识》(美国牛津大学出版社,2006)

  3. Surowiecki, J。群体的智慧(锚,2005)

  4. 布德斯库,d.v.和陈,E.识别专业知识,以提取人群的智慧。管理。科学。61, 267-280 (2014)

    谷歌学者

  5. Mellers, B.等人。赢得地缘政治预测比赛的心理策略。Psychol。科学。25, 1106-1115 (2014)

    文章谷歌学者

  6. Cooke, R. M. & Goossens, L. L. TU代尔夫特专家判断数据库。的完整性。Eng。系统。Saf。93, 657-674 (2008)

    文章谷歌学者

  7. 利用(和滥用)专家启发来支持公共政策的决策。国家科学院学报美国111, 7176-7184 (2014)

    文章中科院广告谷歌学者

  8. Oprea, T. I.等。对NIH化学探针的众包评估。Nat,化学。医学杂志。5, 441-447 (2009)

    文章中科院谷歌学者

  9. 通往更容易接受的专家建议的途径。自然463, 294-295 (2010)

    文章中科院广告谷歌学者

  10. 洛伦兹,J.,劳胡特,H.,施韦策,F.和赫尔宾,D.社会影响如何破坏群体效应的智慧。国家科学院学报美国108, 9020-9025 (2011)

    文章中科院广告谷歌学者

  11. 陈凯,陈建民,陈建民。信息聚合机制中公共知识偏见的消除。管理。科学。50, 983-994 (2004)

    文章谷歌学者

  12. 西蒙斯,J. P.,尼尔森,L. D.,盖拉克,J. &弗雷德里克,S.选择与估计的直觉偏差:对群体智慧的影响。j . Consum。Res。38, 1-15 (2011)

    文章谷歌学者

  13. 赫特威格,心理学。自信地挖掘群众的智慧。科学336, 303-304 (2012)

    文章中科院广告谷歌学者

  14. 巴切尔,W.和罗姆尼,A.没有答案的测试理论。心理测量学53, 71-92 (1988)

    文章MathSciNet谷歌学者

  15. Lee, m.d., Steyvers, M., de Young, M. & Miller, B.推断知识和预测排名任务中的专业知识。上面。Cogn。科学。4, 151-163 (2012)

    文章谷歌学者

  16. 易世凯,史提弗斯,李宗伟,李宗伟,德赖。组合问题中的大众智慧。Cogn。科学。36, 452-470 (2012)

    文章谷歌学者

  17. Lee, m.d. & Danileiko, I.使用认知模型结合概率估计。Judgm。决策。麦。9, 259-273 (2014)

    谷歌学者

  18. 安德斯,R. & Batchelder, W. H.多元共识真理的文化共识理论。j .数学。Psychol。56, 452-469 (2012)

    文章MathSciNet谷歌学者

  19. Oravecz, Z., Anders, R. & Batchelder, W. H.测试理论的无答案的层次贝叶斯建模。心理测量学80, 341-364 (2015)

    文章MathSciNet谷歌学者

  20. 在线学习的决策理论泛化及其在辅助学习中的应用。j .第一版。系统。科学。55, 119-139 (1997)

    文章MathSciNet谷歌学者

  21. 生态理性的模型:认知启发式。Psychol。牧师。109, 75-90 (2002)

    文章谷歌学者

  22. 库克,R。不确定性专家:科学中的意见和主观概率(美国牛津大学出版社,1991)

  23. 什么时候两个臭皮匠比一个诸葛亮?为什么?科学336, 360-362 (2012)

    文章中科院广告谷歌学者

  24. 主观数据的贝叶斯真血清。科学。306, 462-466 (2004)

    文章中科院广告谷歌学者

  25. John, L. K., Loewenstein, G. & Prelec, D.用实话实说的激励来衡量可疑研究实践的普遍程度。Psychol。科学。23, 524-532 (2012)

    文章谷歌学者

  26. 阿罗,K. J.等。经济学。预测市场的承诺。科学320, 877-878 (2008)

    文章中科院谷歌学者

  27. Lebreton, M., Abitbol, R., Daunizeau, J. & Pessiglione, M.脑评价信号中信心的自动整合。Nat。>。18, 1159-1167 (2015)

    文章中科院谷歌学者

下载参考

确认

我们感谢M. Alam、A. Huang和D. Mijovic-Prelec在设计和开展研究3方面的帮助,感谢D. Suh在设计和开展研究4b方面的帮助。由美国国家科学基金会SES-0519141、高级研究所(Prelec)和情报高级研究项目活动(IARPA)通过内政部国家商业中心合同号D11PC20058提供支持。美国政府被授权为政府目的复制和分发再版,尽管其上有任何版权注释。本文所表达的观点和结论仅代表作者的观点和结论,不应被解释为必然代表IARPA、DoI/NBC或美国政府的官方政策或背书(无论是明示的还是暗示的)。

作者信息

作者及隶属关系

作者

贡献

所有作者都对本文的工作做出了广泛的贡献。

相应的作者

对应到半径标注žen Prelec

道德声明

相互竞争的利益

作者声明没有相互竞争的经济利益。

额外的信息

审核人信息自然感谢A. Baillon, D. Helbing和其他匿名审稿人对本工作的同行评审所作的贡献。

扩展的数据图形和表格

扩展数据图1所有研究中所有方法的性能,显示了关于马修斯相关系数。

错误条是引导的标准错误。研究的细节载于图4主体文本的。

扩展数据图2所有研究中所有方法的性能,相对于宏观平均F1分数显示。

错误条是引导的标准错误。研究的细节载于图4主体文本的。

扩展数据图3所有研究中所有方法的表现,以正确问题的百分比表示。

错误条是引导的标准错误。研究的细节载于图4主体文本的。

图4在均匀抽样假设下,聚合方法在二元问题模拟数据集上的性能。

一个是从独立的均匀分布中绘制一对硬币偏差(即信号分布参数)和一个先验世界。硬币偏差和先验的组合导致两次抛硬币的接收者投票给相同的答案被丢弃。一枚实际的硬币根据先验进行抽样,并投掷有限次,以产生不同方法所需的投票、置信度和投票预测(参见补充信息有关模拟细节)。除了显示样本量如何影响不同的聚合方法外,模拟还显示,随着共识的增加,大多数人变得更可靠。90%的“多数”在90%的时间里是正确的,而55%的“多数”并不比随机概率好多少。这不是由于抽样误差,而是反映了模型的结构和模拟假设。根据模型,答案为x%的认可是不正确的,如果对该答案的反事实认可超过x%(定理2),并且抽样这样一个问题的机会随x

补充信息

补充信息

此文件包含补充文本和数据部分1-3 -见内容页的详细信息。(PDF 208kb)

幻灯片

权利和权限

转载及权限

关于本文

通过CrossMark验证货币和真实性

引用本文

陈晓明,陈晓明,陈晓明。单一问题群体智慧问题的一个解决方案。自然541, 532-535(2017)。https://doi.org/10.1038/nature21054

下载引用

  • 收到了

  • 接受

  • 发表

  • 发行日期

  • DOIhttps://doi.org/10.1038/nature21054

这篇文章被引用

评论

通过提交评论,您同意遵守我们的条款而且社区指导原则.如果您发现一些滥用或不符合我们的条款或指导方针,请标记为不适当。

搜索

快速链接

自然简报

报名参加自然简报时事通讯-什么重要的科学,免费到您的收件箱每天。

获取当天最重要的科学故事,免费在您的收件箱。 注册《自然简报》
Baidu
map