圖片來源:pixabay 醫(yī)學(xué)研究需要在臨床試驗開展之前進(jìn)行預(yù)注冊,明確試驗需要測定的數(shù)據(jù)。按照臨床試驗的“金標(biāo)準(zhǔn)”,試驗只能檢測預(yù)定的數(shù)據(jù),而不能隨意檢測其他的數(shù)據(jù)。然而,根據(jù)COMPare組織對世界頂級醫(yī)學(xué)期刊的檢測結(jié)果,近20%的論文沒有如實報道試驗結(jié)果。在比例最高的期刊中,這一數(shù)值甚至達(dá)到80%。醫(yī)學(xué)期刊的如此亂象,會帶來什么隱患?這一現(xiàn)象背后,又是一場怎樣的博弈? 撰文 | 楊心舟 維護(hù)數(shù)據(jù)的金標(biāo)準(zhǔn) 醫(yī)學(xué)論文的不可重復(fù)性逐年嚴(yán)峻,在這一背景下,COMPare組織應(yīng)運(yùn)而生。具體來說,其成立的目的就是檢測醫(yī)學(xué)論文中的結(jié)果轉(zhuǎn)變(outcome swtiching)現(xiàn)象。在臨床試驗開始之前,所有在試驗中測量的指標(biāo)都需在試驗規(guī)劃中定下來。比如,研究覺得某藥物對血壓有積極作用,那就可以計劃檢測治療一年后的血壓。同時,這些計劃必須經(jīng)過臨床試驗注冊,之后不能更改。如果試驗最后報道的不是血壓,而是其他指標(biāo),那就屬于結(jié)果轉(zhuǎn)變。 這項規(guī)定的意義在于,防止研究者在做完試驗之后胡亂檢測指標(biāo)。同樣以治高血壓藥為例,假如研究者在臨床試驗后發(fā)現(xiàn)藥物對血壓無效,決定胡亂檢測一些指標(biāo)。結(jié)果,研究者誤打誤撞,發(fā)現(xiàn)其可以促進(jìn)傷口愈合,于是標(biāo)榜這種藥可以治療傷口。這樣的結(jié)果是不符合臨床試驗標(biāo)準(zhǔn)的,也就是假陽性。而預(yù)定觀測指標(biāo),能夠避免這一錯誤的發(fā)生。 臨床試驗的論文中,所有的數(shù)據(jù)都應(yīng)該報道預(yù)定的觀測指標(biāo),如果報道了不符預(yù)定指標(biāo)的其他項目,必須在文獻(xiàn)中注明,并解釋原因。這是臨床試驗應(yīng)該遵循的“金標(biāo)準(zhǔn)”,但實際情況卻是,多數(shù)臨床試驗選擇報道非預(yù)定的指標(biāo),并且未給出任何標(biāo)注和解釋,這對后期的臨床判斷來說是極大的隱患。 為了減少這種情況,醫(yī)學(xué)界五大期刊——《內(nèi)科醫(yī)學(xué)年鑒》(AIM)、《英國醫(yī)學(xué)雜志》(BMJ)、《美國醫(yī)學(xué)會雜志》(JAMA)、《柳葉刀》(Lancet)和《新英格蘭醫(yī)學(xué)雜志》(NEJM)聯(lián)合簽署了臨床試驗報告統(tǒng)一標(biāo)準(zhǔn)(CONSORT),該標(biāo)準(zhǔn)制定了一系列的規(guī)定,來保證論文發(fā)表數(shù)據(jù)都是提前登記注冊的。期刊也都表示在接受文章、審核之前會嚴(yán)格執(zhí)行CONSORT標(biāo)準(zhǔn),并且如果在文章發(fā)表之后,任何讀者發(fā)現(xiàn)有違反標(biāo)準(zhǔn)的情況,可以投遞修正信,期刊也會審核后附在文獻(xiàn)后同時發(fā)表。 期刊并未按章辦事 那么期刊是否會按章行事?COMPare項目負(fù)責(zé)人Ben Goldacre和同事們一同檢測了五大期刊超過六周的醫(yī)學(xué)論文,并且將所有正確和不正確執(zhí)行CONSORT標(biāo)準(zhǔn)的結(jié)果都列舉出來。 在此次項目中,一共檢測了67項醫(yī)學(xué)試驗。分析結(jié)果顯示,平均76%的研究論文的主要結(jié)果按照了預(yù)定指標(biāo)進(jìn)行報道,其中BMJ按章執(zhí)行占比最低只有25%,JAMA最高達(dá)到81.8%。但到了次級結(jié)果還能按標(biāo)準(zhǔn)報道的平均水平降到了55%。在所有的醫(yī)學(xué)論文中,平均每篇論文都新增了5.4個全新但未經(jīng)聲明的結(jié)果,占比達(dá)到13.7%。 但是這并不只是研究者一方的問題。作為簽署了CONSORT標(biāo)準(zhǔn)的發(fā)表機(jī)構(gòu),這些學(xué)術(shù)期刊也并未恪盡職守,許多已經(jīng)發(fā)表的文獻(xiàn)并未完全展示所有的研究成果。平均19.4%的研究主要結(jié)果并未全部報道出來,其中遺漏程度最高的AIM達(dá)到80%。 在發(fā)現(xiàn)如此多的漏洞后,Goldacre團(tuán)隊也向各大期刊匯報了情況。根據(jù)CONSORT標(biāo)準(zhǔn),期刊都需要對情況進(jìn)行審核并如實匯報出來。但結(jié)果卻不盡人意,在針對問題數(shù)據(jù)寄出的58封信件中,最后發(fā)表并聲明更正的只有23封,連一半都不到。其中寄給JAMA的11封以及NEJM的20封修正信,1封都沒有發(fā)表。即使信件最后被發(fā)表了,審核過程也平均長達(dá)99天,最長的近一年后才被發(fā)表。 NEJM是醫(yī)學(xué)期刊中影響因子最高的期刊,但在Goldacre的測試中,16篇NEJM學(xué)術(shù)期刊一共添加了65項非預(yù)定指標(biāo)的結(jié)果,其中只有2項進(jìn)行了標(biāo)注。對于兩家未發(fā)表任何修正聲明的期刊,Goldacre也曾試圖進(jìn)行溝通了解拒絕發(fā)表的原因,但得到的卻是不能接收更正的回信。 他在COMPare的網(wǎng)站上也公開了與NEJM期刊編輯的來往書信。來自NEJM的編輯在回信中寫道,“期刊用于相關(guān)性資料的部分非常有限,因此我們要從大量的來信材料中進(jìn)行選擇,評判,”言外之意是不會將所有的修正信都展示出來,“盡管NEJM簽署了CONSORT標(biāo)準(zhǔn),但是不代表我們認(rèn)可,我們認(rèn)為作者沒有必要遵循CONSORT標(biāo)準(zhǔn),對于新加的結(jié)果我們也單獨(dú)進(jìn)行了同行評議和審核。” 在來來回回的信件中,許多編輯都表示不能理解COMPare組織存在的目的是什么,很多人認(rèn)為它就是一個以CONSORT標(biāo)準(zhǔn)對期刊進(jìn)行檢測的組織。與這些期刊編輯一樣,許多論文作者也誤解了CONSORT規(guī)則以及預(yù)注冊在共享試驗計劃方面的作用。一些人甚至稱COMPare項目是該研究群體的“門外漢”。 對此,Goldacre解釋道:“我們這么做,是為了遏制現(xiàn)在在臨床試驗中盛行的結(jié)果轉(zhuǎn)換現(xiàn)象,因為結(jié)果轉(zhuǎn)變會直接影響后面的臨床決定。” 科學(xué)界力圖消滅假數(shù)據(jù) 除開COMPare組織,同樣也還有其他組織致力于挖掘這些消失和錯報的試驗數(shù)據(jù),被稱作RIAT(恢復(fù)隱藏和丟棄試驗支持中心)的機(jī)構(gòu)同樣也在做這么一件事,他們認(rèn)為許多生物醫(yī)學(xué)試驗文獻(xiàn)沒有報道所有的結(jié)果,或者以一種不正確的方式對其進(jìn)行了詮釋。從2013年成立該機(jī)構(gòu)以來,獲得的成效卻非常少,除了找出隱藏數(shù)據(jù)所需的時間長,期刊的不配合或者數(shù)據(jù)供給不足也是重要原因。2018年,美國科學(xué)公共圖書館(PLoS)站出來支持了RIAT組織,并聯(lián)合宣稱將投入15萬美元進(jìn)行合作,改善學(xué)術(shù)文獻(xiàn)的漏洞。 這種對試驗數(shù)據(jù)要進(jìn)行預(yù)期計劃的專業(yè)其實并不只有醫(yī)學(xué),在去年Science就以“越來越多的科學(xué)家選擇提前注冊要進(jìn)行檢測的結(jié)果,你呢?”為標(biāo)題發(fā)文,呼吁科學(xué)界行動起來,不要在試驗開始后為了湊出一篇文章去測很多沒有意義的數(shù)據(jù)。 心理學(xué),基礎(chǔ)研究中實驗數(shù)據(jù)虛假和無法重復(fù)的重災(zāi)區(qū)。為了打破這種窘境,心理學(xué)研究也開始效仿醫(yī)學(xué)研究,引入了預(yù)注冊(Preregistration)的方式。這一舉措,不僅僅只是為了撥開讓心理學(xué)研究上的陰云,同時這也能讓研究者按照詳實的計劃來完成實驗,而不會因為隨意檢測而扭曲了事實本身。從2012年開始,在開發(fā)科學(xué)框架中,推行預(yù)注冊方式發(fā)表研究的期刊逐年遞增,幾乎每年都在翻倍?,F(xiàn)今已經(jīng)超過120家雜志或期刊選擇了預(yù)注冊的方式進(jìn)行研究報道。 但就像NEJM的幾位編輯回信一樣,并不是所有人都認(rèn)同這一行為。Susan Goldin-Meadow,《心理科學(xué)》的聯(lián)絡(luò)人就表示,“如果我們開展試驗之前就標(biāo)注好了條條框框,那還怎么會做出新的發(fā)現(xiàn)?” 埃因霍芬理工大學(xué)的Anne Scheel同樣也表達(dá)了要完全保證按照預(yù)注冊的規(guī)劃來執(zhí)行很困難,“你完全沒法保證哪一組將成為最佳的對照組。” 為了讓預(yù)注冊的試驗計劃更容易成功,加州大學(xué)伯克利分校的Leif Nelson也建立了一個網(wǎng)站給研究者提供簡易試驗?zāi)繕?biāo)設(shè)計?;蛟S,目前還無法說出預(yù)注冊這種方式是好是壞。但它至少提醒科學(xué)家,要更加嚴(yán)謹(jǐn)?shù)貙Υ约旱膶嶒炦^程以及數(shù)據(jù)。尤其是在醫(yī)學(xué)研究上,每一個數(shù)據(jù)都對臨床操作具有極大的意義。 在醫(yī)學(xué)試驗上,任何微小的改變都應(yīng)該被提出來,作為把關(guān)的期刊是義不容辭的,“我們希望期刊編輯能對我們的發(fā)現(xiàn)作出積極、有建設(shè)性和深思熟慮的回應(yīng)。”Goldacre表示,但顯然,現(xiàn)在期刊完成的任務(wù)還遠(yuǎn)遠(yuǎn)不夠。 參考鏈接: https://trialsjournal./articles/10.1186/s13063-019-3173-2#Sec7 http://en./tech/i31116309-Despite-public-pledges-leading-scientific-journals-still-allow-statistical-misconduct-and-refuse-to-correct-it.html http:///methods#whyitmatters https://blogs./speakingofmedicine/2018/04/26/revealing-the-rest-of-the-iceberg-the-restoring-invisible-and-abandoned-trials-riat-support-center-grant-competitions/ http:///blog/how-did-nejm-respond-when-we-tried-to-correct-20-misreported-trials/ https://www./news/2018/09/more-and-more-scientists-are-preregistering-their-studies-should-you https:///2019/02/15/pre-specified-outcomes.html 《環(huán)球科學(xué)》2019年2月刊現(xiàn)已上市 |
|