本文来自微信公众号:果壳(ID:Guokr42),作者:游识猷,编辑:Stellasun,原文标题:《他炮制了一篇“钓鱼”研究,把无数人耍得团团转,包括你!》,题图来自:unsplash


约翰·博安农(John Bohannon)又干了桩大件事。 


(在你问他是谁之前……)博安农是牛津大学的分子生物学博士,Science和Wired的撰稿人,也是个脑洞很大的奇葩。他的个人网站列出了他曾干过的一些大事  以“实验”和“结果”的形式。

            


亲手打造“垃圾”研究:黑巧克力能减肥?


事情的起因是这样的。2014年,两位德国电视记者,彼得·翁嫩肯(Peter Onneken)和黛安娜·勒布尔(Diana Löbl),想拍个关于减肥食品业界的纪录片。


翁嫩肯研读了欧洲的S3膳食指南,发现许多制定指南的专家受雇于减肥公司或食品公司,并在指南中推荐雇主的特定膳食。他们私下联系了其中的几位专家,有人承认某些研究做得不够好——这有点太轻描淡写了,翁嫩肯觉得有些研究简直就是垃圾。而这些垃圾研究被冠以科学之名,登上媒体头条,在全世界广为传播,然后一些奇怪的膳食就能大卖特卖……


于是,翁嫩肯就找到了博安农商量:单纯揭露批判,总觉得力度不够,不如我们按照这些套路,自己动手搞个垃圾膳食研究?


这种闷声发大招,搞个大新闻的事情,博安农最擅长了! 


两人一拍即合。他们的“造假”步骤如下:


1. 选择研究题目


翁嫩肯本来想搞个“啤酒有益身心”的研究。然而,他们的纪录片计划在德法两国播放,而法国对于电视上播放的喝酒内容,有很多法律规定……于是啤酒出局。


冈特·弗兰克(Gunter Frank) 医生是这次“研究”的主持者,他提出了一个新的“研究结论”——黑巧克力有助减肥。弗兰克说,人们对于难吃的东西有种朴素的信仰,总觉得好吃的就是垃圾食品,难吃的就是自然灵药……其实很多时候,苦味预示着有毒啊!演化给的自保本能,就这样轻易地丢掉真的好吗?


不管怎么说,“黑巧克力很苦很难吃,所以它肯定对健康有益”,嘛,就这么愉快地决定了!


2. 收集数据


这帮人在Facebook上发了个广告,“吃三周指定饮食,赚150欧元”,并征来了15个志愿者——本来是16人,后来有一个中途退出的。然后把这15人随机分三组。对照组继续正常饮食,试验组I吃低碳水化合物饮食,试验组II吃同样的低碳水化合物饮食外加每天一条1.5盎司(约合45克)的81%的黑巧克力。


图 | pixabay
图 | pixabay


3. 统计分析


他们找了个金融分析师朋友亚历克斯(Alex Droste-Haars)来分析数据,分析师喝着啤酒干了一个周末,发现数据简直完美!


对照组体重基本不变,两个试验组平均体重都轻了5磅(2千克左右),经统计检验,差别显著。而且黑巧克力组的减肥速度还快了10%,此外,黑巧克力组的健康自评分数更高。


图 | pixabay
图 | pixabay


4. 写论文,投论文


还记得博安农化身非洲学者一口气投中了157篇论文那次么?在挑选野鸡期刊上,他可有独到的一手心得。总之,他化名约翰尼斯·博安农(Johannes Bohannon)投了20家期刊,在24小时内就接到一大堆录用通知。在这些表示“这文章我收了”的期刊中,博安农选中了《全球医学研究期刊》(Global Journal of Medical Research),给该刊交了600欧元的版面费,不到两周后,搞定!


总之,论文搞定。


5. 让媒体报道


一开始博安农是比较悲观的。他想,记者只要随便Google一下,就会发现论文作者所在单位“饮食与健康研究大学”(University Institute of Diet and Health)根本就不存在……记者再找个靠谱的科学家读一遍论文,就会发现结论根本站不住脚。


一个公关业的朋友告诉博安农,其实没那么难。抓住一点关键就行——记者都懒。只要你替记者把该写的东西都写好,记者们就会自动开始复制黏贴,最后发出来一篇和你的原稿八九不离十的东西。


博安农于是写了一篇给媒体专用的“新闻发布稿”,放上了大部分数据——有意没提样本数等“小瑕疵”。记者即使不读原始论文,读完这篇稿子也能动笔写了。


他还找音乐人拍了两条MV,一个男声说唱版,一个女声民谣版,主题都是《巧克力变身》(The Chocolate Transformation)——还记得吗,这家伙是“跳出你的PhD”舞蹈大赛的组织者。

世上无难事,只怕统计学……图片来源:xkcd
世上无难事,只怕统计学……图片来源:xkcd


第二条肮脏的科学小秘密,则藏在样本数量里。


博安农自己写道,“我们的研究注定不靠谱,原因就在于样本数量太少,这就放大了不可控因素的影响。举个例子,女性在月经周期中体重波动就可以高达两千克,这就已经远超过我们那两个试验组之间的体重差异了。正是因此,才需要很多人的大样本,还要平衡好不同组里的年龄和性别组成(我们当然没理这事)。”


忽然想起了塞拉利尼的“转基因玉米致癌”论文:同样发表在名声一般的开放获取期刊(OA)上,同样是样本量小而分组多——能不能少一点统计套路,多一份科研真诚?


博安农还写,“幸运的是,在这些问题上,科学家们变得越来越明智了。有些期刊正试着慢慢淘汰p值检验,推动科学家养成更好的习惯。现在几乎没人会正眼看样本量低于30的研究。知名期刊的编辑都懒得把这样的稿子送审,直接就会拒掉。但是,也有很多期刊比起声誉,更看重金钱。”


顺便说一句,在博安农的“自杀式袭击”公开后,登他论文的那家活该倒霉的期刊出版方憋出一则声明,说其实博安农的文章他们是拒了的,只是不知为何,这篇文章意外出现在了他们期刊的网站上,同样不知为何,这篇文章一直保留了好几天,对此他们深表歉意,其实他们是一家有理想有伦理透明公开的严肃期刊……



博安农对此的回应是:“啊如果真的撤稿了我一定要把600欧元的版面费要回来!”


钓鱼是为了说明:没有传播,就没有伤害


钓鱼当然不是好事。这场钓鱼实验的发起人翁嫩肯也承认这一点,同时他也声明,他们尽了最大可能让上当的人不受伤害。“吃黑巧克力,一般不会造成什么大问题”,而参与实验的那16个人都经过血检加问卷,确定没有人有糖尿病、饮食紊乱等问题。


他做这一切,只为了告诉全世界的媒体——这样的研究根本就不该出现在媒体上!没有传播,就没有伤害!


“如果科学家做了个屎一样的研究,但没人听说,那就没人受害。英国小报说火星上有恐龙,那无所谓。但有些人真的需要减肥,需要饮食干预,而很多被报道出来的研究对他们毫无帮助。”


而博安农想告诉全世界媒体的是——


膳食科学,是一门科学。


如果你想报道科学,你必须学会如何读论文,必须愿意花时间脑力去真的读论文,必须秉持着追求真实之心,近乎苛刻地审视每个结论是否真能成立。


“假如一个膳食研究不提样本数多大,或者说了个惊人的结论,然后只说差异在‘统计上显著’,却不跟你说差异到底多大,你就该开始思考这是为什么。”“但大多数时候,我们记者没有去追问。这很令人遗憾,因为如今的记者已成了现实生活中的同行评议系统。当我们未能尽忠职守,世界就会被坏科学淹没。”


本文来自微信公众号:果壳(ID:Guokr42),作者:游识猷