想要打赌吗? 赌博可以揭示哪些科学研究值得他们的盐

赌博在很多圈子里都不受欢迎。 但是,如果赌徒是研究人员押注彼此的实验将如何结果,并且结果被用于改善科学本身呢? 一群心理学家发现,他们的集体赌博 - 用真钱-预测了复制实验结果的尝试的结果比他们自己的专家猜测更好。 他们提出,这种被称为预测市场的赌博设置可能成为科学如何完成的一部分。

科学效率低下。 根据大多数估计,在同行评审的期刊上发表的大约一半的结果都是误报-主要发现结果是侥幸。 就可信赖的结果达成共识的最佳方式是在不同的实验室中复制实验。 问题是很少有科学家想花时间直接复制彼此的工作。 如果只有一种方法来衡量哪些实验更可能是误报。

这就是预测市场的用武之地。“人群的智慧”可以成为估算未知测量的有力工具,但积极的人群更加敏锐。 例如,即使大多数猜测都远离标记,关于牛的重量或罐中的米粒数量的100人的平均猜测通常接近正确。 但是当这些人在游戏中拥有皮肤时,例如通过下注而不仅仅是猜测,准确性往往要高得多。

由斯德哥尔摩经济学院行为经济学家安德•德雷伯(Anna Dreber)领导的团队建立了基于再现性项目:心理学的预测市场,该项目精心策划了的 。 他们招募参与这些复制的心理学家参加两个预测市场-首先是2012年11月,然后是2014 10月-每个市场运行2周。 研究人员使用商业在线 。 市场各有约50名交易员,并为交易者提供每笔100美元的投注。 (这些钱来自Dreber的补助金。)大约十几个交易员实际参与了一些实验性复制,所以不允许他们下注。

在预测市场中,您可以即时更改您的赌注。 这就是它的样子:市场开始时每个选项设定为0.50美元。 假设您对两个特定选项有强烈的预感-实验X将成功,Y将失败。 所以你开始下注这两个选项。 但是其他人也有同样的预感,这些选择的价格会迅速上涨。 一旦价格达到0.80美元,你就会去其他地方并对实验Z感兴趣。大多数人都认为它失败了,所以价格只有0.15美元。 你认为它的机会更像50/50,所以这是一个讨价还价。 你卖掉了你的一些实验X股,并用你剩下的钱来实现Z的成功。这种马交易一直持续到市场收盘-所有人都知道的预定时间。 一旦实验的真实结果出现,正确的赌注就会得到回报。

在市场开放之前,每个交易者都进行了一项调查,宣布每次实验复制成功的机会(0%到100%)。 如果预测市场确实有效,那么它必须不仅比随机更好,而且比预测结果更好。 否则,你可以问科学家,而不是经历投注的大惊小怪。

Dreber团队安排的市场热闹非凡。 合同转手2500次,赌注频繁,有利于学习。 一旦尘埃落定,研究成功的投注价格最终平均为0.55美元。 这意味着心理学家预计大约一半的复制会失败。 但他们准确吗?

总体而言,他们过于乐观:只有39%的实验成功复制。 但预测市场仍然比调查准确得多。 作为个体,心理学家并没有比随机更好地猜测结果:只有58%的个体上市前猜测证明是正确的。 但根据市场集体预测成功-根据最终的赌注来预测成功或失败- ,该团队今天在“ 美国国家科学院院刊”上报道。

参与市场的研究人员不确定是什么指导他们的决策。 英国布里斯托尔大学的心理学家MarcusMunafò说:“我会在上午的工作中检查市场。” “我根据我对每项研究目前市场地位是否过高或低估的感觉来买卖仓位。” 最后,他的钱差不多翻了一倍,达到180美元。 Munafò将所有这些都花在了音乐上-他的科学成功主题曲现在是Booker T.和MG的

加利福尼亚州斯坦福大学的生物学家John Ioannidis警告说,开办这样的市场并不容易,他们试图建立一个基因实验预测市场。 “让调查人员在市场上发挥作用具有挑战性。” 虽然结果显示预测市场真的可以预测,但他对疾病基因组学这样的领域感到疑惑,与心理学研究不同,“这些途径非常错综复杂:预测市场可能更难以做出有用的预测,因为我们面临的是不可预知的黑匣子。“ 另一个限制是“为了判断市场是否做出了成功的选择,你无论如何都需要进行复制,所以你并没有真正避免花费这些额外的资源。”

Dreber有计划解决这个问题:科学家可以打赌大量实验,但只选择随机样本进行复制。 “没有确定结果的研究投注可以以市场价格结算,”她说。 那么科学真的会成为一场赛马。