證據等級
證據等級 ,或稱證據金字塔 (英語:levels of evidence ,常以縮寫LOE 代表;或 英語:hierarchy of evidence ),係指以啟發法 為科學研究結果的相對強度來進行排名 。針對大型流行病學 研究的相對強度排名已廣獲普遍認可;目前用以評估醫學證據 所提出的等級,已超過80種以上[ 1] 。研究的設計方法和及試驗指標也會影響證據強度;前者例如特定病人的案例報告 或依盲法 進行的隨機對照試驗 ,後者例如存活率或生活品質 。臨床研究 中,治療效能的最佳證據,主要就是基於統整有多篇隨機對照實驗 的統合分析 [ 2] [ 3] 。統合了高品質的完整隨機對照試驗 之系統性回顧 ,和囊括了治療副作用的高品質完整觀察型研究之系統性回顧,二者相較的話,其等級可評估為相同重要。前者的例子即為考科藍 實證醫學資料庫所發表的文章[ 4] 。實證應用 中經常應用證據等級,並將其整合至實證醫學 之中。
定義
2014年,斯特根加(Stegenga )將證據金字塔定義為「依各種研究方法所受到潛在的系統誤差之影響的大小,來進行證據等級排序。」在此證據金字塔中,位居頂端的研究方法,在經驗證的醫學處置中對假設性的療效,所受系統性偏誤影響最小,或者說它的內部效度最高[ 5] :313 。1997年,格林哈爾(Greenhalgh )稱證據品質金字塔為「在臨床處置的決策時,所依循的原始研究,依不同的研究方法類型,分別代表的相對權重[ 6] 。」
美國國家癌症研究所 將證據等級定義為「一種排名 系統,用來描述臨床試驗 或研究的結果強度。研究設計 的方法和所測量的臨床指標,都會影響到證據強度[ 7] 。」
例子
現今已經提出許多評估證據等級的方法,但用於評估研究品質的類似草案仍在發展中。目前可用的草案較少關注於結果研究比較關注於「治療效能」(efficacy ,即理想狀態下,治療得到的結果)或是「治療效益」(effectiveness ,在一般日常、可預期狀態下治療得到的結果)。
建議強度(GRADE)
建議強度評比系統,全稱「建議強度的評估、發展和評價分級」(GRADE,Grading of Recommendations Assessment, Development and Evaluation)是一種評估證據確定性(也稱為「證據品質」或「對預估效果的可信度」)和建議強度的方法[ 8] 。建議強度評比始於2000年,由方法學家、指引制定者、生物統計學家、臨床醫生、公共衛生科學家和其他對此議題有興趣的成員組成。
超過100個組織(包括世界衛生組織 、英國國家健康與照顧卓越研究院 (NICE)、加拿大衛生保健預防工作小組(the Canadian Task Force for Preventive Health Care)、哥倫比亞衛生和社會保障部 等)認同且已使用或正在使用建議強度評比系統來評估證據品質和衛生保健建議的強度[ 9] [ 10] 。
建議強度評比系統為證據品質的評分如下:[ 11] [ 12]
高
非常有把握觀察值接近實際值。
中
對觀察值有中等把握:觀察值可能接近實際值,但也可能存有顯著差異。
低
對觀察值的把握有限:觀察值可能和實際值顯著不同。
極低
對觀察值沒有把握:觀察值和實際值極有可能顯著不同。
蓋亞特和薩克特
1995年,蓋亞特 (Guyatt )和薩克特 (Sackett )發表第一個這樣的金字塔層級架構[ 13] 。
格林哈爾(Greenhalgh )將不同類型的初級研究按以下順序排列:[ 6]
收錄「有明確結果的隨機對照試驗」的系統性回顧 和統合分析 。
有明確結果的隨機對照試驗(信賴區間與臨床顯著效應閾值不重疊)
無明確結果的隨機對照試驗(估計點具臨床顯著效應,但信賴區間橫跨該效應的閾值)
世代研究
病例對照研究
橫斷面研究
病例報告
桑德斯等人
桑德斯(Saunders )等人提出草案建議將研究報告分為六大類,依:研究設計、理論背景、可能產生的傷害及大眾的接受度。依這個草案進行分類時,處置必須有敘述性的文獻發表,包含手冊或類似的描述。此草案並不考量對照組的特質、干擾因子的效果、統計分析的特性或是各種其他的條件。
處置可被評估而分為以下六類:[ 14]
第一類:有優良研究支持且療效顯著的處置。指有兩個或是以上的隨機對照試驗,比較目標處置和一個合適的對照組,且目標處置的療效顯著地優於對照組。
第二類:有研究支持且可能有療效的處置。根據非隨機分組,有某種類型的對照組(可能是未接受治療的對照組),且研究結果有顯著療效。
第三類:有研究支持且療效尚可的處置。支持的研究類型,包括一個有對照組或無對照組的研究,或一系列由單一病患組成的病例系列研究,或是由不同族群組成的研究,而這族群並非我們感興趣的族群。
第四類:有前膽性且療效尚可的處置。處置除了過去普遍被接受和被臨床歷史文獻提到外,並沒有良好的臨床研究支持;但若有任何證據顯示處治可能有害,則不應列在此類。
第五類:創新或新興的處置,包含:不認為會造成傷害,但目前文獻上並無廣泛討論或使用。
第六類:有疑慮的處置,包含可能造成傷害,及理論基礎不明或不合理的處置。
可汗等人
可汗(Khan )等人在實證回顧與傳播中心提出一個評估研究品質的草案,做為評估醫學和社會心理處置的一般方法。雖然強烈建議使用隨機分派設計,但草案指出,此類設計只有滿足以下嚴格的準則時才適用,如:正確的隨機分派,且對所有受試者及研究人員隱匿分組資訊(隱匿分組資訊),包括那些評估研究結果的研究人員(盲法)。這份草案也強調需使用「治療意向分析」(intention to treat )進行比較,以避免任一組中的受測者退出的人數或原因不相近而產生偏差。草案也為非隨機研究設立嚴格的標準,包括根據可能的潛在干擾因子進行配對分析,充分描述每個階段的分組和治療,並對評估結果的人隱瞞受試者的治療選擇(盲法)。這個草案沒有為證據等級分類,但根據研究是否符合規定的標準,將治療分為符合或不符合實證。 [ 15]
美國國家實證應用暨計劃註冊中心
美國國家實證應用暨計劃註冊中心(英語:U.S. National Registry of Evidence-Based Practices and Programs ,縮寫為 NREPP)已制定出一個評估草案。需符合以下條件才會依草案進行評估:當處置措施至少有一個或以上的統計顯著(概率小於 0.05)正向結果;已發表於同行評審 的期刊或評估報告中;且可取得文件內容,如可供培訓的資料。評估結果會將研究品質由 0 到 4 級評分,參考標準包括:研究所採用的結果測量,其可靠性和有效性、支持處置再現性(可預測每次治療都以相同方式進行)的證據、數據遺失和失訪受試者的數量、可能的干擾因素 及是否使用合適的統計方法調整,包括足夠的樣本數。[ 16]
歷史
加拿大
這個術語源於 1979 年的加拿大定期健康檢查工作組(Canadian Task Force on the Periodic Health Examination ,縮寫為 CTF)報告中,「依所根據證據的品質衡量治療的有效程度[ 17] :1195 」。
它使用的分級制有三個等級,第 II 級再細分成二個子等級:
第 I 級:參考至少一個隨機對照試驗 的證據
第 II1 級:參考至少一個設計良好的世代研究 或病例對照研究 ,特別是由一個以上的研究小組或醫學中心組成
第 II2 級:在不同時間或地點,有無處置間的比較
第 III 級:參考權威機構基於臨床經驗、描述性研究或專家委員會而給予的意見
CTF 將建議分為 A-E 共 5 級[ 17] :1195 :針對特定情境
A:良好證據支持的建議
B:尚可證據支持的建議
C:不良證據支持的建議
D:尚可證據支持的建議,反對這樣做
E:良好證據支持的建議,反對這樣做
此外,CTF 在 1984 年[ 18] 、1986 年[ 19] 和 1987 年[ 20] 更新了他們的報告。
美國
美國的預防服務工作小組 (USPSTF)於 1988 年根據加拿大定期健康檢查工作組提出了他們的指引[ 21] [ 22] ,同樣分為三等級,並將第二級再分成二個子等級。
I 級:證據來自於至少一個設計優良的隨機對照試驗
II-2 級:證據來自於設計優良的世代研究 或病例對照研究 ,最好由一個以上的醫學中心或研究團體組成
II-3 級:證據來自於數個時間序列 研究,比較有無處置間的結果。具戲劇性結論的非對照試驗中也屬於這個等級。
III 級:由權威專家提出,基於臨床經驗、描述性研究或專家委員會報告的意見。
此後數年,還有數個評分標準被提出[ 23] 。
英國
2000 年 9 月,英國牛津實證中心 (英語:Centre for Evidence-Based Medicine ,縮寫為 CEBM)發表有關預後、診斷、治療效果、治療危害和篩檢問題的「證據等級」指南。它不僅涉及治療和預防,還包含診斷檢測、預後指標或傷害。原始的 CEBM 證據等級是刊在《實證值班》(Evidence-Based On Call)中,讓證據檢索及評估結果的過程精確可行。發表在 2009 年的版本[ 24] ,如下:
證據等級
研究種類
解釋
第一級
1a
由隨機對照試驗 組成的系統性回顧
結果間異質性低
1b
單一隨機對照試驗
結果的信賴區間 小
1c
全或無
指過去絕對死亡的情況,治療後有可能存活;或過去可能會死亡的情況,治療後全數存活
第二級
2a
由世代研究 組成的系統性回顧
結果間異質性低
2b
單一世代研究或低品質的隨機對照試驗
例如完成追蹤比率 <80%
2c
「結果」研究;生態學研究
第三級
3a
由病例對照研究 組成的系統性回顧
結果間異質性低
3b
單一病例對照研究
第四級
4
個案病例系列 、品質較差的世代研究和病例對照研究
第五級
5
專家意見 ,且未經明確地嚴格評讀,或基於生理學、實驗研究或符合第一性原理
2011 年,國際團隊重新設計了牛津 CEBM 證據等級,使其更易於理解,並參考證據排名方案的最新發展。這個等級已被患者及臨床醫生使用,並用於製定臨床指引,包括:銀屑病 最佳化使用光療和局部治療的建議[ 26] 及在加拿大使用 BCLC 分期系統診斷和監測肝細胞癌 的指引[ 27] 。
全球
2007 年,世界癌症研究基金會 的分级系统分成:令人信服的、高可能性的、低可能性的和證據不足的,共四個等级[ 28] 。所有疾病的全球負擔研究 都以它來評估支持因果關係的流行病學證據[ 29] 。
支持
1995 年威爾遜等人[ 30] 、1996 年哈多恩等人[ 31] 與 1996 年阿特金斯等人[ 32] 描述各種類型的分級系統並為它們辯護。
反對
提出證據等級十年後,在21世紀對它的批評逐漸增加。2011年,一篇針對重要文獻的系統回顧整理出三類批評:實證醫學的程序問題(特別是卡特賴特 Cartwright 、沃拉爾 Worrall 和豪威克 Howick )、實證醫學的易錯性高於預期(約阿尼迪斯Ioaanidis 等人)及實證醫學被視為一種不完備的科學哲學 (阿什克羅夫特Ashcroft 等人)[ 33] 。多數批評發表在哲學期刊上,因此並未得到支持實證醫學的臨床醫師們關注。邁克爾·羅林斯 [ 34] 及羅賓·布魯姆 表明,實證醫學限制了研究結果應用在個別病人照護上,且要了解病因,必須同時了解人口研究和實驗室研究。此外,實證醫學的證據等級並不考量醫療處置的安全性與有效性的研究。隨機對照實驗 設計需要說明組內差異,而這需要將證據等級由一種同時參考流行病學與實驗室研究關係的網絡體系取代才能達成[ 35] 。
根據研究設計建立證據等級一直受到質疑,因為「指引無法正確地為此定義,衡量某些非隨機分配對照研究的優點,及考量研究設計上所有局限性的完整清單[ 36] 。」
施泰根加(Stegenga )特別批評將統合分析視為證據等級最高的做法[ 37] 。隨機對照試驗應該被放在證據等級的最頂端的假設也被沃勒爾(Worrall )[ 38] 和卡特賴特(Cartwright )[ 39] 批評。
羅斯·尤普舒爾 於2005年表示,實證醫學是讓醫師變得更好的指南,但不是哲學教條 。他指出實證醫學支持者表現出「近乎福音教徒般」的熱情,並深信實證醫學的優越性,而忽略那些有助拓展實證醫學邊界的批評[ 40] 。
博格森(Borgerson )於 2009 年寫到證據等級的高低並非絕對,不要知識論 般地為他們辯護,但「醫學研究者更應該注意那些處理普遍存在偏差的社會機制」[ 41] 。拉卡茲(La Caze )指出雖然基礎科學 位於實證醫學較低的階級,但是它卻在「指出實驗方向、分析與解讀資料上扮演重要角色」[ 42] 。
康卡托(Concato )於 2004 年反駁證據等級給于隨機對照試驗過多的影響力,且並非所有研究問題都可以用隨機對照試驗回答,不論是因為實務或倫理議題。即便已有高品質的隨機對照試驗,其他研究類型的證據仍然重要[ 43] 。相較其他系統,施泰根加認為證據等級評估系統不合理地侷限且相較其它的評比提供的資訊更少[ 5] 。
2015 年,克里斯托弗·布朗特(Christopher J Blunt )的博士論文專門研究各種醫學上的證據等級,論文指出「廣為接受的等級,像是拉卡茲模型、條件式層次結構(如:GRADE 建議強度)及豪威克等人捍衛的啟發式方法,以上皆通過先前的哲學批評,但他認為這些都非常薄弱,無助於臨床應用。例如,「GRADE 建議強度和類似的條件式模型,忽略臨床相關信息,如:治療效果的變異程度,及造成治療反應不同的原因;而啟發式方法缺乏必要的經驗支持」。布朗特進一步提到「階層結構對在臨床上應用證據的基礎不足」,因為證據等級背後的核心假設,「將由高品質證據支持的平均治療效果,視為強烈建議的合理性」是站不住腳的,因此,由個別研究支持的證據應單獨評讀[ 44] 。
參見
參考文獻
^ Siegfried T. Philosophical critique exposes flaws in medical evidence hierarchies . Science News. 2017-11-13 [2018-05-16 ] . (原始内容 存档于2019-12-25).
^ Shafee, Thomas; Masukume, Gwinyai; Kipersztok, Lisa; Das, Diptanshu; Häggström, Mikael; Heilman, James. Evolution of Wikipedia's medical content: past, present and future . Journal of Epidemiology and Community Health. 28 August 2017, 71 (11): jech–2016–208601. ISSN 0143-005X . PMC 5847101 . PMID 28847845 . doi:10.1136/jech-2016-208601 .
^ Straus SE, Richardson WS, Glasziou P, Haynes RB. Evidence-based Medicine: How to Practice and Teach EBM 3rd. Edinburgh: Churchill Livingstone. 2005: 102 –05. ISBN 978-0443074448 .
^ Golder, Su; Loke, Yoon K.; Bland, Martin. Vandenbroucke, Jan P. , 编. Meta-analyses of Adverse Effects Data Derived from Randomised Controlled Trials as Compared to Observational Studies: Methodological Overview . PLOS Medicine (Public Library of Science (PLoS)). 2011-05-03, 8 (5): e1001026. ISSN 1549-1676 . PMC 3086872 . PMID 21559325 . doi:10.1371/journal.pmed.1001026 .
^ 5.0 5.1 Stegenga J. Down with the hierarchies . Topoi. October 2014, 33 (2): 313–22 [2022-05-24 ] . S2CID 109929514 . doi:10.1007/s11245-013-9189-4 . (原始内容 存档于2022-06-01).
^ 6.0 6.1 Greenhalgh T . How to read a paper. Getting your bearings (deciding what the paper is about) . BMJ. July 1997, 315 (7102): 243–6. PMC 2127173 . PMID 9253275 . doi:10.1136/bmj.315.7102.243 .
^ National Cancer Institute. NCI Dictionary of Cancer Terms: Levels of evidence . US DHHS-National Institutes of Health. n.d. [8 December 2014] . (原始内容 存档于2015-05-10).
^ Schünemann, HJ ; Best, D; Vist, G; Oxman, AD. Letters, numbers, symbols, and words: How best to communicate grades of evidence and recommendations? . Canadian Medical Association Journal. 2003, 169 (7): 677–80.
^ GRADEpro . Gradepro.org. [16 August 2019] . (原始内容 存档于2020-09-26).
^ Request Rejected . (原始内容 存档于2016-02-25).
^ Balshem, Howard; Helfand, Mark; Schünemann, Holger J.; Oxman, Andrew D.; Kunz, Regina; Brozek, Jan; Vist, Gunn E.; Falck-Ytter, Yngve; Meerpohl, Joerg; Norris, Susan. GRADE guidelines: 3. Rating the quality of evidence . Journal of Clinical Epidemiology. 2011-04, 64 (4) [2022-06-20 ] . doi:10.1016/j.jclinepi.2010.07.015 . (原始内容 存档于2022-06-10) (英语) .
^ Reed Siemieniuk and Gordon Guyatt. What is GRADE? . BMJ Best Practice. [2020-07-02 ] . (原始内容 存档于2022-06-19).
^ Guyatt, Gordon H. Users' Guides to the Medical Literature: IX. A Method for Grading Health Care Recommendations . JAMA. 1995-12-13, 274 (22). ISSN 0098-7484 . doi:10.1001/jama.1995.03530220066035 (英语) .
^ Saunders, B., Berliner, L., & Hanson, R. (2004). Child physical and sexual abuse: Guidelines for treatments. Retrieved September 15, 2006, from http://www.musc.edu/cvc.guidel.htm [永久失效連結 ]
^ Khan, K.S., et al. (2001). CRD Report 4. Stage II. Conducting the review. phase 5. Study quality assessment. York, UK: Centre for Reviews and Dissemination, University of York. Retrieved July 20, 2007 from http://www.york.ac.uk/inst/crd/pdf/crd_4ph5.pdf
^ National Registry of Evidence-Based Practices and Programs (2007). NREPP Review Criteria. Retrieved March 10, 2008 from http://www.nrepp.samsha.gov/review-criteria.htm [永久失效連結 ]
^ 17.0 17.1 Canadian Task Force on the Periodic Health Examination. Task Force Report: The periodic health examination . Can Med Assoc J. 3 November 1979, 121 (9): 1193–1254. PMC 1704686 . PMID 115569 .
^ Canadian Task Force on the Periodic Health Examination. Task Force Report: The periodic health examination. 2. 1984 update . Can Med Assoc J. 15 May 1984, 130 (10): 1278–1285. PMC 1483525 . PMID 6722691 .
^ Canadian Task Force on the Periodic Health Examination. Task Force Report: The periodic health examination. 3. 1986 update. Can Med Assoc J. 15 May 1986, 134 (10): 721–729.
^ Canadian Task Force on the Periodic Health Examination. Task Force Report: The periodic health examination. 2. 1987 update . Can Med Assoc J. 1 April 1988, 138 (7): 618–26. PMC 1267740 . PMID 3355931 .
^ Lawrence, Robert; U. S. Preventive Services Task Force Edition. Guide to Clinical Preventive Services . DIANE Publishing. 1989 [9 December 2014] . ISBN 978-1568062976 . (原始内容 存档于2022-06-01).
^ U.S. Preventive Services Task Force. Guide to clinical preventive services: report of the U.S. Preventive Services Task Force . DIANE Publishing. August 1989: 24–. ISBN 978-1-56806-297-6 . Appendix A
^ Welsh, Judith. Levels of evidence and analyzing the literature . National Institutes of Health Library. January 2010 [9 September 2015] . (原始内容 存档于2016-03-31).
^ Oxford Centre for Evidence-based Medicine – Levels of Evidence (March 2009) . Centre for Evidence-Based Medicine. 2009-06-11 [25 March 2015] . (原始内容 存档于2017-10-26).
^ OCEBM Levels of Evidence Working Group. The Oxford Levels of Evidence 2' . May 2016 [2022-06-20 ] . (原始内容 存档于2013-12-05).
^ Paul, C.; Gallini, A.; Archier, E.; et al. Evidence-Based Recommendations on Topical Treatment and Phototherapy of Psoriasis: Systematic Review and Expert Opinion of a Panel of Dermatologists. Journal of the European Academy of Dermatology and Venereology. 2012, 26 (Suppl 3): 1–10. PMID 22512675 . S2CID 36103291 . doi:10.1111/j.1468-3083.2012.04518.x .
^ World Cancer Research Fund AICR. Food, Nutrition, and Physical Activity, and the Prevention of Cancer: A Global Perspective. American Institute for Cancer Research, Washington, DC; 2007
^ Lim, Stephen S; Vos, Theo; Flaxman, Abraham D; Danaei, Goodarz; Shibuya, Kenji; Adair-Rohani, Heather; Almazroa, Mohammad A; Amann, Markus; Anderson, H Ross; Andrews, Kathryn G; Aryee, Martin; Atkinson, Charles; Bacchus, Loraine J; Bahalim, Adil N; Balakrishnan, Kalpana; Balmes, John; Barker-Collo, Suzanne; Baxter, Amanda; Bell, Michelle L; Blore, Jed D; Blyth, Fiona; Bonner, Carissa; Borges, Guilherme; Bourne, Rupert; Boussinesq, Michel; Brauer, Michael; Brooks, Peter; Bruce, Nigel G; Brunekreef, Bert; et al. A comparative risk assessment of burden of disease and injury attributable to 67 risk factors and risk factor clusters in 21 regions, 1990–2010: A systematic analysis for the Global Burden of Disease Study 2010 . The Lancet. 2012, 380 (9859): 2224–2260. PMC 4156511 . PMID 23245609 . doi:10.1016/S0140-6736(12)61766-8 .
^ Wilson, Mark C. Users' Guides to the Medical Literature: VIII. How to Use Clinical Practice Guidelines B. What Are the Recommendations and Will They Help You in Caring for Your Patients? . JAMA. 1995-11-22, 274 (20). ISSN 0098-7484 . doi:10.1001/jama.1995.03530200066040 (英语) .
^ Hadorn, David C.; Baker, David; Hodges, James S.; Hicks, Nicholas. Rating the quality of evidence for clinical practice guidelines . Journal of Clinical Epidemiology. 1996-07, 49 (7) [2022-06-20 ] . doi:10.1016/0895-4356(96)00019-4 . (原始内容 存档于2022-06-20) (英语) .
^ Atkins, D; Best, D; Briss, P. A; Eccles, M; Falck-Ytter, Y; Flottorp, S; Guyatt, G. H; Harbour, R. T; Haugh, M. C; Henry, D; Hill, S; Jaeschke, R; Leng, G; Liberati, A; Magrini, N; Mason, J; Middleton, P; Mrukowicz, J; O'Connell, D; Oxman, A. D; Phillips, B; Schünemann, H. J; Edejer, T; Varonen, H; Vist, G. E; Williams Jr, J. W; Zaza, S; GRADE Working Group. Grading quality of evidence and strength of recommendations . BMJ. 2004, 328 (7454): 1490. PMC 428525 . PMID 15205295 . doi:10.1136/bmj.328.7454.1490 .
^ Solomon, Miriam. Just a paradigm: evidence-based medicine in epistemological context . European Journal for Philosophy of Science. 2011-10, 1 (3). ISSN 1879-4912 . doi:10.1007/s13194-011-0034-6 (英语) .
^ Rawlins M . De Testimonio: on the evidence for decisions about the use of therapeutic interventions . Clinical Medicine (Royal College of Physicians ). December 2008, 8 (6): 579–88. PMC 4954394 . PMID 19149278 . doi:10.7861/clinmedicine.8-6-579 .
^ Bluhm R . From hierarchy to network: a richer view of evidence for evidence-based medicine. Perspectives in Biology and Medicine (約翰斯·霍普金斯大學出版社 ). October 2011, 48 (4): 535–47. PMID 16227665 . S2CID 1156284 . doi:10.1353/pbm.2005.0082 .
^ Gugiu, PC; Westine, CD; Coryn, CL; Hobson, KA. An application of a new evidence grading system to research on the chronic care model. Eval Health Prof. 3 April 2012, 36 (1): 3–43. CiteSeerX 10.1.1.1016.5990 . PMID 22473325 . S2CID 206452088 . doi:10.1177/0163278712436968 .
^ Stegenga, J. Is meta-analysis the platinum standard of evidence? . Stud Hist Philos Biol Biomed Sci. 2011, 42 (4): 497–507 [2022-06-20 ] . PMID 22035723 . doi:10.1016/j.shpsc.2011.07.003 . (原始内容 存档于2022-05-31).
^ Worrall, John. What Evidence in Evidence‐Based Medicine?. Philosophy of Science. 2002, 69 : S316–S330. S2CID 55078796 . doi:10.1086/341855 .
^ Cartwright, Nancy. Are RCTs the Gold Standard? (PDF) . BioSocieties. 2007, 2 : 11–20 [2022-06-20 ] . S2CID 145592046 . doi:10.1017/s1745855207005029 . (原始内容 (PDF) 存档于2021-04-30).
^ Upshur RE . Looking for rules in a world of exceptions: reflections on evidence-based practice . Perspectives in Biology and Medicine (約翰斯·霍普金斯大學出版社 ). Autumn 2005, 48 (4): 477–89. PMID 16227661 . S2CID 36678226 . doi:10.1353/pbm.2005.0098 .
^ Borgerson K. Valuing evidence: bias and the evidence hierarchy of evidence-based medicine (PDF) . Perspectives in Biology and Medicine (約翰斯·霍普金斯大學出版社 ). Spring 2009, 52 (2): 218–33. PMID 19395821 . S2CID 38324417 . doi:10.1353/pbm.0.0086 .
^ La Caze A. The role of basic science in evidence-based medicine. Biology & Philosophy (施普林格 ). January 2011, 26 (1): 81–98. doi:10.1007/s10539-010-9231-5 .
^ Concato J. Observational versus experimental studies: what's the evidence for a hierarchy? . NeuroRx (施普林格 ). July 2004, 1 (3): 341–7. PMC 534936 . PMID 15717036 . doi:10.1602/neurorx.1.3.341 .
^ Blunt, Christopher J. Hierarchies of evidence in evidence-based medicine . PhD Thesis (London School of Economics and Political Science). September 2015 (英语) .
延伸閱讀
外部連節