系統性回顧研究經驗分享
時間過得很快,算算自己也已在澳洲打滾了一年半的時間,這段時間裡我最大的主力便是放在如何做好一個系統性回顧研究(Systematic Review, SR)。在愈來愈講求實證研究的現在,SR成為提供療效證據十分重要的工具,而我有幸可以成為Cochrane Library的回顧作者之一,並參與他們完整的回顧研究過程,以下我就把自己至今所獲得的經驗跟大家分享一下,若有人打算從事Cochrane SR,也許可以做個參考。
在做Cochrane SR之前的第一步是先依據欲做回顧之內容向特定的Cochrane Review Groups(http://www.cochrane.org/contact/regcrgs.htm#90)申請Title register. 以我申請的Cochrane Stroke Group為例,group committee會在接到申請後的慣例會議(每1-2個月)中討論是否接受該回顧研究的申請。然後他們會email通知作者是否接受,或是提出問題要求作者進一步解釋該回顧的特點或與其他相關回顧的不同之處。
Title被接受後,便可以開始Review Protocol的撰寫,除了一般的introduction外,protocol的一大要點是要寫出”完整”的文獻搜尋策略,搜尋的範圍需包含(1) electronic databases:列出欲搜尋的databases名稱及年代範圍,並以其中一個database為例寫出搜尋策略;(2)citation tracking;(3)handsearch:列出所有handsearch的期刊名及年代範圍;(4) search references lists;(5)Unpublished and non-English studies:需說明如何處理這兩纇之文獻。這樣詳細的寫法在於Cochrane Library希望能確保作者搜尋到所有可能的實證研究。
寫electronic databases搜尋策略是很花時間的一件事,老實說,但卻也是極重要的一個步驟,我是先以MEDLINE (OVID)作為撰寫策略的第一個藍本並試跑結果,其他的databases則以這個藍本再作修改,因為我覺得OVID在指令設計上比較完整,跑出來的結果較為精確,若得到不如預期的結果也比較知道從何修改。在運用MEDLINE (OVID)的策略到其他databases (e.g. CINAHL; PsycINFO; EMBASE等)時,須注意每個database用以分類文獻的”標題(Headings)”均不盡相同,如OT在MEDLINE中只有”Occupational Therapy”一個heading,但在CINAHL與PsycINFO中則還有” Occupational Therapists”及其他更多的headings可用,所以在寫策略時最好是每個database重新找過一次可能的headings(然後存檔下來:P)。另外,headings這個名詞也會因提供者(provider)的不同而不同,如OVID與EBSCOhost稱為headings;CSA Illumina稱為Thesaurus,所以在撰寫策略時,先熟悉欲搜尋的database是由哪一家提供者提供也是很重要的,因為這也會牽涉到搜尋指令的使用(如$, ?, adj 是只有OVID才有的指令)。不過如果學校都是向同一家提供者購買databases使用權的話,那就天下太平不用擔心那麼多了。(所以感謝UQ讓我熟悉這麼多家不同的providers T__T)
Cochrane review protocol剩下的部分就是需思考怎麼樣的研究才可以被納入SR之中,只有randomised controlled trials (RCT)嗎?Quasi-RCT可不可以納入?是否納入其他low-evidence的研究?Cochrane Library近幾年是傾向只納入RCTs,不過最終的決定權還是在作者身上(當然group committee會給予必要的comments)。Protocol準備完畢便是再交由group committee審核,每個protocol會有5-6個reviewers給予comments,其中一個reviewer會針對搜尋方法給建議,所以如果不希望之後有太多修改的話,其實可以先詢問每個group的coordinator (上述Groups中的通訊者即是) 該group是否有專人可以提供相關的協助,先做討論修改。Protocol從submit到approval的時間不一定,我是6個月(很高興我的protocol在上上個禮拜通過了,將會被刊在2007年 issue 2中),另一個學生據我所知是一年,而review的準備、撰寫到submit,一般是一年的時間,所以是段漫長的路。
做SR需至少有3個人參與以便降低可能的誤差,其中研究的選取、研究品質的評析、data extraction均由2人分別獨立完成,意見不同的地方再由第3人決定。由於目前我才即將要結束所有的文獻篩選,進入data extraction的階段,所以後續的分析經驗就暫時還無法分享囉。
做SR最大的好處,或許便是在透過篩檢每一個標題、摘要、甚或是全文的過程中,廣泛且徹底的了解當前該領域的研究或是相關研究的進展,如有關認知的RCT研究中,針對TBI患者所做的研究比中風患者多很多,且其中以memory的研究又較attention及orientation多,而目前研究有朝awareness及executive function發展的趨勢,但RCT研究仍不足。SR雖然是很花費時間與精力的一種研究方法,但卻也不失為一種以結構化方式了解特定研究領域進展的最佳途徑。
不知不覺間也寫了這麼長(笑),若能對大家有所幫助那就太好了。也歡迎大家一起討論,給我意見。^^
佳苓 11.29.2006
在做Cochrane SR之前的第一步是先依據欲做回顧之內容向特定的Cochrane Review Groups(http://www.cochrane.org/contact/regcrgs.htm#90)申請Title register. 以我申請的Cochrane Stroke Group為例,group committee會在接到申請後的慣例會議(每1-2個月)中討論是否接受該回顧研究的申請。然後他們會email通知作者是否接受,或是提出問題要求作者進一步解釋該回顧的特點或與其他相關回顧的不同之處。
Title被接受後,便可以開始Review Protocol的撰寫,除了一般的introduction外,protocol的一大要點是要寫出”完整”的文獻搜尋策略,搜尋的範圍需包含(1) electronic databases:列出欲搜尋的databases名稱及年代範圍,並以其中一個database為例寫出搜尋策略;(2)citation tracking;(3)handsearch:列出所有handsearch的期刊名及年代範圍;(4) search references lists;(5)Unpublished and non-English studies:需說明如何處理這兩纇之文獻。這樣詳細的寫法在於Cochrane Library希望能確保作者搜尋到所有可能的實證研究。
寫electronic databases搜尋策略是很花時間的一件事,老實說,但卻也是極重要的一個步驟,我是先以MEDLINE (OVID)作為撰寫策略的第一個藍本並試跑結果,其他的databases則以這個藍本再作修改,因為我覺得OVID在指令設計上比較完整,跑出來的結果較為精確,若得到不如預期的結果也比較知道從何修改。在運用MEDLINE (OVID)的策略到其他databases (e.g. CINAHL; PsycINFO; EMBASE等)時,須注意每個database用以分類文獻的”標題(Headings)”均不盡相同,如OT在MEDLINE中只有”Occupational Therapy”一個heading,但在CINAHL與PsycINFO中則還有” Occupational Therapists”及其他更多的headings可用,所以在寫策略時最好是每個database重新找過一次可能的headings(然後存檔下來:P)。另外,headings這個名詞也會因提供者(provider)的不同而不同,如OVID與EBSCOhost稱為headings;CSA Illumina稱為Thesaurus,所以在撰寫策略時,先熟悉欲搜尋的database是由哪一家提供者提供也是很重要的,因為這也會牽涉到搜尋指令的使用(如$, ?, adj 是只有OVID才有的指令)。不過如果學校都是向同一家提供者購買databases使用權的話,那就天下太平不用擔心那麼多了。(所以感謝UQ讓我熟悉這麼多家不同的providers T__T)
Cochrane review protocol剩下的部分就是需思考怎麼樣的研究才可以被納入SR之中,只有randomised controlled trials (RCT)嗎?Quasi-RCT可不可以納入?是否納入其他low-evidence的研究?Cochrane Library近幾年是傾向只納入RCTs,不過最終的決定權還是在作者身上(當然group committee會給予必要的comments)。Protocol準備完畢便是再交由group committee審核,每個protocol會有5-6個reviewers給予comments,其中一個reviewer會針對搜尋方法給建議,所以如果不希望之後有太多修改的話,其實可以先詢問每個group的coordinator (上述Groups中的通訊者即是) 該group是否有專人可以提供相關的協助,先做討論修改。Protocol從submit到approval的時間不一定,我是6個月(很高興我的protocol在上上個禮拜通過了,將會被刊在2007年 issue 2中),另一個學生據我所知是一年,而review的準備、撰寫到submit,一般是一年的時間,所以是段漫長的路。
做SR需至少有3個人參與以便降低可能的誤差,其中研究的選取、研究品質的評析、data extraction均由2人分別獨立完成,意見不同的地方再由第3人決定。由於目前我才即將要結束所有的文獻篩選,進入data extraction的階段,所以後續的分析經驗就暫時還無法分享囉。
做SR最大的好處,或許便是在透過篩檢每一個標題、摘要、甚或是全文的過程中,廣泛且徹底的了解當前該領域的研究或是相關研究的進展,如有關認知的RCT研究中,針對TBI患者所做的研究比中風患者多很多,且其中以memory的研究又較attention及orientation多,而目前研究有朝awareness及executive function發展的趨勢,但RCT研究仍不足。SR雖然是很花費時間與精力的一種研究方法,但卻也不失為一種以結構化方式了解特定研究領域進展的最佳途徑。
不知不覺間也寫了這麼長(笑),若能對大家有所幫助那就太好了。也歡迎大家一起討論,給我意見。^^
佳苓 11.29.2006

5 Comments:
很高興我的protocol在上上個禮拜通過了,將會被刊在2007年 issue 2中
恭喜恭喜...那樣應該算是篇個人著作吧!?
另我個人有些問題請教大師你...
1. 什麼樣的topic需要作SR ?
2. SR做完後(雖然你目前還在進行),會有什麼outcome? 或你預測會有什麼結果呢?
應該算吧...不過正確來說我只是小小的第三作者^^b 然後還要完成完整的review才可哩
什麼樣的topic呀...我是覺得只要是你有興趣,可用實證方法獲得結果的領域都可以做耶,包含評量或是治療方法的療效驗證。因為作SR最主要的目的就是找到相關的證據以協助臨床/研究作出決策。
SR的outcome最好的情況是能夠有夠多的RCTs且能夠pooling在一起做Meta-analysis,來看最終的結果。我的結果的話,應該是沒有足夠可以放在一起分析的RCTs,所以可能沒辦法得到一個有效的結論。不過我會逐一討論找到的RCTs(e.g.研究方法及結果),然後點出目前在stroke認知治療方面已有的證據,其結果如何,還有哪些領域缺乏研究等等。
恕我所知薄淺,請問有評估工具的RCT相關研究嗎?還是RCT應該都是用於療效驗證?
而你所要傳達的意思應該是評估工具的信效度或utility (非RCT應用) 也可以透過SR來歸納出一些結果??
誠如你說,若此領域的RCT研究不多,則SR的結果會不彰,是無可避免的!但相反來說,新的研究就等你去創造開發嚕!
謝謝啟文的問題!
我是指不同的評量方法(評量工具),對有興趣之結果(outcomes of interest)的影響,比方說患者的recovery (http://www.mrw.interscience.wiley.com/cochrane/clsysrev/articles/CD003081/frame.html or http://www.mrw.interscience.wiley.com/cochrane/clsysrev/articles/CD001054/frame.html),疾病的診斷(http://www.mrw.interscience.wiley.com/cochrane/clsysrev/articles/CD004446/frame.html)等。
根據Cochrane Handbook ver4.2.5(p.59),在設定Cochrane review question時,必須考慮4個key components(PICO): Participants; Interventions; Comparisons(但也可能沒有,即comparison是不給予其他intervention);Outcomes。
所以我覺得只要是欲驗證某(或某些)介入方法(含評量,治療)對特定結果的影響,都有機會做SR.
我不是很確定單一工具本身的信效度研究可不可以做SR(還要再想想),但我覺得若是比較不同工具對同一病人的predictive validity(或其他心理計量特性);或是驗證單一工具對不同族群的心理計量特性應該都是可行的題目。不過我還沒找到這類的SR就是了。
補充一點:outcomes這裡指→things that are important for decision making.
以上是我的想法,可以再討論喔~
ㄟ 好奇怪,連結被砍掉了...
再試一次,依序是:
http://www.mrw.interscience.wiley.c
om/cochrane/clsysrev/articles/CD003
081/frame.html
http://www.mrw.interscience.wiley.c
om/cochrane/clsysrev/articles/CD001
054/frame.html
http://www.mrw.interscience.wiley.c
om/cochrane/clsysrev/articles/CD004
446/frame.html
Post a Comment
<< Home