作者 | N. ZELIADT
编译 | RAY
一些批评人士说，微生物化合物能缓解孤独症行为的说法还为时过早。
在一项备受瞩目的研究中，许多科学家指出了分析和解释可能存在的错误。这项研究表明，微生物可以缓解小鼠的孤独症样行为。《纽约时报》发表几小时后，就在Twitter和出版后评论网站PubPeer上出现了激烈的反应。
在5月30日发表在《细胞》杂志上的论文中，Sarkis Mazmanian和他的同事报告说，来自孤独症男孩的粪便移植可以引发小鼠类似孤独症的行为，而来自某些微生物的分子可以缓解这些行为。
该研究发表几分钟后，独立专家开始在Twitter上对论文中的三幅图表表示担忧。
考虑到要探测的变量数量非常多，因此发现一些差异并不奇怪。没有对复制样本进行测试，所以我之前的预期是，这些样本都是假的，除非被证明是真的。——凯文·米切尔(Kevin Mitchell @WiringTheBrain) 2019年5月30日。
他们提出的每个图表所对应的“p值”(统计意义的衡量指标)似乎不可信。“这些数据没有通过我所谓的眼球测试，”其中一位推特用户、爱尔兰都柏林三一学院(Trinity College Dublin)遗传学副教授凯文·米切尔(Kevin Mitchell)说。
其他人则对该研究样本量太小表示担忧。
不要让我开始讲大多数分析中使用的3个对照和5个案例中的N个。捐赠者之间的差异是巨大的。——乔纳森·塞巴特(@sebatlab) 2019年5月30日。
“你在论文中看到的数据是很误导人的，因为它看起来有很多数据点，但实际上它们来自于一小部分参与者，” 前孤独症研究人员乔恩布洛克(Jon Brock)说。布洛克在6月13日出版的《Medium》杂志上发表了一篇文章，对研究人员使用的样本量小和行为测试提出了批评。他写道:“鉴于这项研究的声势浩大，其核心论点的证据非常薄弱。”
类似的评论促使没有参与这项研究的统计学家托马斯·拉姆利(Thomas Lumley)重新分析了数据。6月16日，拉姆利在他的个人博客上发表了他的重新分析。他的结论是，这项研究的一个关键发现，小鼠的社交活动少于对照组，可能是由有缺陷的统计分析造成的。
不恰当的分析
为了进行上述分析，研究人员将捐赠者，5名孤独症男孩和3名对照组孩子的的粪便，分别移植到至少8只不同的小鼠体内。他们发现，作为一个群体，患有孤独症男孩粪便的老鼠比对照组埋弹珠的动作更多，并且与其他老鼠互动的时间更少，在一个开放的房间里走的距离更短。这些结果出现在米切尔等人提供的三张图表中。
但在他们的统计分析中，研究人员似乎对每组小鼠都进行了独立的治疗，尽管有些小鼠的粪便来自同一供体，Lumley说。这个错误人为地夸大了每一组的样本量。根据他的重新分析，在纠正了这个错误之后，统计上唯一显著的差异是老鼠埋下的弹珠的数量。
“作者的分析不适合他们的实验设计，而且也没有被清楚地描述，因为论文中两个不同的地方有相互矛盾的描述，”新西兰奥克兰大学生物统计学系主任Lumley说。
研究人员坚持他们的原始结果:“当我们今天坐在这里时，我们没有发现我们所做的统计数据有任何错误。” 但帕萨迪纳的加州理工学院微生物学教授Mazmanian说他已经要求一些统计学家重新分析数据。他说:“我们想把这件事做好。”“我们将尽一切可能确保达成一个我们能够捍卫的结论。”
Lumley说，他对重新分析感到困惑，因为尽管Sarkis Mazmanian的团队已经在网上提供了数据，但他们在图片说明中描述的统计方法与论文的方法部分不一致。“图片说明中的那个很清楚，但并不是他们所做的，”Lumley说。“方法一部分的不是很清楚。”
统计缺陷
Lumley开始使用标题中描述的方法进行重新分析。这种方法解释了所有粪便移植捐赠者之间的随机差异，然后寻找与孤独症捐赠者相关的差异。“我认为这是正确的分析，但它没有给出他们给出的结果，它提供的差异证据少得很” Lumley说。
然后，他根据他在方法部分找到的描述和研究人员在PubPeer上提供的其他细节重新分析了数据。他能够重现这三幅图的p值。不过，他说，奇怪的是，研究人员把每只老鼠当作从不同的供体那里得到粪便一样对待。“这是一个奇怪的分析，”Lumley说。“我看不出你为什么故意这样做。”
问题可能出在研究人员使用的SPSS软件上。(Mazmanian说团队的统计学家遵循了软件的指导方针。) 即使统计分析没有被证明是有缺陷的，批评人士说，振奋的发现需要达到比p值更高的标准。
“p值只是总结了实验中的数据，” Mitchell 说，“如果这是一个非同寻常的论断，如果它需要一些新的生物学机制，而这些机制实际上是未知的，没有任何研究基础强有力地支持它，那么我们应该要求更高标准的证据。”
Mitchell 说，一个更高的标准是复制。另一种是注册报告，这是一种同行评审的期刊文章，研究人员在收集数据之前首先描述他们的研究方法。
该论文的批评者还指出，该团队的四名成员已经申请或批准了有关使用微生物或微生物分子治疗孤独症和其它疾病的专利。Mazmanian也是Axis Bitherapeueutics公司的联合创始人和董事，该公司开发针对这些病症的肠道疗法。
微信客服
微信公众号
