維基百科

誰害怕同行評審？

2013年論文

《誰害怕同行評審？》（英語：Who's Afraid of Peer Review?）為《科學》記者約翰·伯罕農（英語：John Bohannon）於2013年10月4日發表的文章，講述其對付費開放取用科學期刊的同行評審程序所進行的調查。2013年1月至8月，伯罕農向304份付費開放取用出版商發佈的學術期刊提交了虛假學術論文。他稱文章內容「錯誤百出、科學謬論顯而易見，應當被期刊編輯及同行評審員立馬退貨」，唯最後60%的學術期刊通過了伯罕農杜撰的論文[2][3]。

Letharia vulpina（英語：Letharia vulpina），虛構學術論文中此地衣被訛作具有抑制癌症的分子[1]。

背景

2000年，付費開放取用科學項目開始出現，當中包括當年成立的BioMed Central及公共科學圖書館。這類學術期刊不對讀者徵收訂閲費，而是向提交論文的作者（或其資助者）徵收出版費，論文公諸於世後供讀者在網上免費讀取。此類模式稱作「金色開放取用」，被視爲是開放取用出版模式永續經營的其中一種手段[4]。亦有出版商採用延遲開放取用（英語：Delayed open-access journal）模式經營，論文發表後短時間內需付費查閲，唯過了指定時間後則可免費讀取。這兩種開放取用出版模式日益盛行，2011年發表的學術論文中，於2013年時至少有一半可以在網上免付費公開取得[5]。

鑒於創立出版社的門檻不高，且獲利快速、回酬高，市場上開始冒出「掠奪性出版社」。這類出版商發表低質量的學術期刊，編審控制與同行評審程序形同虛設，爲了盡可能賺取更多出版費而不顧品質發表每一篇接獲投稿的論文。一些出版方甚至盜用知名科學家名堂，稱其為期刊編輯或同行評審員，讓論文作者信以爲真。亦有出版商故意混淆出版社地址和真實身份[6]。此類詐騙型出版商層出不窮，而科學界對於應當採取什麽行動應對，也是議論紛紛[7]。

調查方法

虛假論文

伯罕農運用Python創建了「科學版本的Mad Libs（英語：Mad Libs）[註 1]」[2][8]。論文的基本脈絡為「品種Y地衣的X分子抑制Z癌細胞的生長」。他創建的數據庫記有各種分子、地衣及癌細胞，用作X、Y和Z的替代詞。每一篇論文的數據及結論都一樣，內容大意指發現了一種從地衣身上提取的成分可用作新型抗癌藥物，但所提供的數據其實都無法支撐結論，且有明顯破綻。作者身份及所屬機構也全數虛構[9][10]。

選定出版商

伯罕農參考了首次點出掠奪性出版社廣泛存在的傑弗里·比爾（英語：Jeffrey Beall）所發表的比爾列表（英語：Beall's List），此列表由比爾個人創建，列出他認爲是以掠奪性模式經營的出版社。伯罕農也參考了正規的開放取用期刊指南（英語：Directory of Open Access Journals）（DOAJ），在結合兩者後整理出了一份詳盡的付費開放取用出版商列表。他隨後開始篩選，用英文發表、收取出版費、至少出版一份醫學、生物學或化學期刊的304家出版社獲保留，其中有167家為DOAJ成員，121家為比爾列表所稱的掠奪性出版商，另有16家出版商為DOAJ成員，但同時也在比爾列表上榜上有名。此次調查專注在付費開放取用期刊，伯罕農拒絕將其他開放取用模式或付費訂閲型科學期刊囊括在調查內，他認爲傳統科學期刊的評閲時間太冗長。也正因如此，此次調查未有對不同經營模式的學術期刊品質作對比[11]。

調查結果

通過 vs 駁回

總計304份科學期刊中，157份通過了伯罕農杜撰的論文，98份駁回，剩餘49份中有29份期刊的網站失效，另20份在伯罕農發佈文章時仍未完成審閲[2]。完成審閲的255份期刊中，約60%很可能在完全沒有進行同行評審下就決定通過或回拒論文。在未經同行評審之下即刻駁回論文或展示了編輯部的篩濾職能，但未經同行評審之下通過論文則顯示了此類期刊審閲論文的程序存在重大紕漏。僅36份期刊點出了論文的科學性謬誤，其中16份科學期刊雖指論文品質較差甚至毫不留情地抨擊，但最後仍通過了論文。接受這篇虛假論文的不乏知名研究院及出版公司旗下的期刊，其中就包括了愛思唯爾、賽吉、威科集團（旗下的Medknow出版公司（英語：Medknow Publications））及數所大學[2]。

公共科學圖書館及Hindawi（英語：Hindawi (publisher)）發行的科學期刊駁回了這份僞造論文。其中，《PLOS ONE》進行的同行評審可説是最為嚴謹，且是唯一一份指出論文倫理缺陷的科學期刊。該刊發現此研究在使用動物製造癌症細胞株時，沒有詳細將對待動物的方式記錄在案[2]。

DOAJ vs 比爾列表

比爾列表（英語：Beall's List）中榜上有名且完成評閲的期刊中，有82%通過了該篇論文。伯罕農表示「這證明比爾在追查品質管制不達標的出版商方面相當出色」。傑弗里·比爾（英語：Jeffrey Beall）則認爲此調查肯定了他嘗試鑒定掠奪性出版商的努力[12]。然而，餘下18%被比爾歸類爲掠奪性出版的期刊則沒有接受此僞造論文，科學傳播員菲爾·戴維斯（Phil Davis）就表示「這代表比爾列表中每五份期刊中就有其中一份被污衊」[13]。

完成了論文審閲的開放取用期刊指南（英語：Directory of Open Access Journals）（DOAJ）成員中，有45%通過論文[13]。DOAJ隨後發佈文告指正在實行新的收錄制度[14]。

環球詐騙期刊地圖

《科學》發表這篇調查報告的同時，也公佈了出版商、編輯與銀行賬戶所在地地圖，並以紅綠兩色區分通過或回拒僞造論文的期刊。《科學》通過電郵查獲的IP位址、WHOIS及繳付出版費所取得的銀行發票鑒定地點。印度的付費開放取用出版商數量爲全球之冠，其中65家通過了這篇錯漏百出的論文，僅15家駁回[2]。美國次之，29家出版社通過論文，26家駁回。尼日利亞是非洲國家當中最多付費開放取用出版商的，且全數接受了這篇虛假論文[15]。

回應

開放取用出版商

調查報告公佈後，個別出版商宣佈將至少三份科學期刊撤出市場[16]。DOAJ表示該指南正審查會員列表，且實行更嚴謹的入圍標準。[17]開放取用學術出版者協會（英語：Open Access Scholarly Publishers Association）（OASPA）成立委員會，調查該會其中三家出版商成員通過僞造學術論文一事[18]。2013年11月11日，OASPA終止德孚醫藥出版社（英語：Dove Medical Press）及希卡里（Hikari Ltd.）的會籍，而賽吉則被標記為「審查中」，長達半年[19]。賽吉出版社發佈文告指該社正審核通過虛假論文的期刊，但不會就此停刊[20]。賽吉在改進期刊編輯機制後，在OASPA的審查階段尾聲時重獲會籍[21]。2015年9月，OASPA在審核了德孚醫藥出版社新定製的編輯及同行評審機制後，允許德孚重返該會[22]。

科學界

報告出爐數小時後，《科學》的調查工作引來了開放取用運動支持者的猛烈抨擊[23][24]。

公共科學圖書館的創始人之一邁克爾·艾森（英語：Michael Eisen）是第一位批判調查的大牌人物。他在個人部落格寫道：「《科學》（唯非伯罕農）所作所爲，即指科學出版的問題在於開放取用模式使網絡詐騙可行，就好像在說國際金融行業的問題在於促使尼日利亞詐騙案發生。科學出版所面對的疑難根深蒂固。然而解決問題的辦法不是推翻開放取用出版模式，是搞好同行評審。[25]」艾森也諷刺如《科學》這般的付費閲讀期刊發表此類調查是自打嘴巴，因爲《科學》的同行評審也曾在砷元素DNA論文事件中通過存有紕漏的學術研究。

在一場由哈佛開放取用計劃領導人彼得·薩伯主持的討論會中，艾森與伯罕農就此事展開對話。艾森炮轟伯罕農的調查對開放取用運動造成名譽上的傷害[26]。他對伯罕農說：「你的研究特別針對了開放取用期刊，無論你是否有此意，都強烈隱射著開放取用期刊更可能進行品質低劣的同行評審，因此應該遭受更嚴厲的審核。」伯罕農回應稱此類批評就像是「狙擊信使」（遷怒於揭發壞消息的人）。

另一方面，多個單位站出來支持是次調查[27][13]，且表示對論文騙局感到擔憂[28][29][30]。出版倫理委員會（英語：Committee on Publication Ethics）則回應稱：「無可否認此事揭發了很多問題……但我認爲這可能不是《科學》進行調查的主要目的。[31]」

影響

科學家探討了使同行評審透明化（英語：Open peer review）的多個提議[32]。若實行開放同行評審，科學期刊就必須公佈同行評審報告，完全沒有同行評審程序的掠奪性期刊則將自曝其短，抑或需僞造文件[33]。另有科學家建議更嚴謹地篩濾期刊，並授權由DOAJ或OASPA等負責。DOAJ也收緊了期刊入選制度，希望收錄在該指南內的期刊可作爲可信期刊的公衆指引，與比爾列表列出掠奪性期刊作用相似，唯內容相反[34]。

參見

註釋

  1. ^ 一種在西方國家流行的填字游戲。

參考文獻

  1. ^ Paper 1 in the data supplement for Bohannon 2013.
  2. ^ 2.0 2.1 2.2 2.3 2.4 2.5 Bohannon, John. Who's Afraid of Peer Review?. Science. 2013, 342 (6154): 60–65. Bibcode:2013Sci...342...60B. PMID 24092725. doi:10.1126/science.342.6154.60  . 
  3. ^ Bohannon, John. Data and Documents; Who's Afraid of Peer Review. Science. 2013a, 342 (6154): 60–65 [2021-06-11]. PMID 24092725. doi:10.1126/science.342.6154.60  . （原始內容存檔於2015-10-09）. 
  4. ^ Suber, Peter. Open Access Overview. Earlham College. [2013-10-21]. （原始內容存檔於2014-02-28）. 
  5. ^ Van Noorden, Richard. Half of 2011 papers now free to read. Nature. 2013-10-20, 500 (7463): 386–387. Bibcode:2013Natur.500..386V. ISSN 0028-0836. PMID 23969438. doi:10.1038/500386a  . 
  6. ^ Knox, Richard. Some Online Journals Will Publish Fake Science, For A Fee. NPR. 2013-10-03 [2013-10-20]. （原始內容存檔於2015-05-09）. 
  7. ^ Butler, Declan. Investigating journals: The dark side of publishing. Nature. 2013-05-27, 495 (7442): 433–435. Bibcode:2013Natur.495..433B. ISSN 0028-0836. PMID 23538810. doi:10.1038/495433a  . 
  8. ^ Koebler, Jason. Inside Science Magazine's 'Sting' of Open Access Journals. Motherboard. [2013-10-22]. （原始內容存檔於2013-10-23）. 
  9. ^ Science's Sokal moment. The Economist. 2013-10-05 [2013-10-20]. （原始內容存檔於2019-10-29）. 
  10. ^ Vergano, Dan. Fake Cancer Study Spotlights Bogus Science Journals. National Geographic. 2013-10-03 [2013-10-22]. （原始內容存檔於2019-04-11）. 
  11. ^ Oransky, Ivan. Science reporter spoofs hundreds of open access journals with fake papers. Retraction Watch. 2013-10-03 [2013-10-22]. （原始內容存檔於2013-10-23）. 
  12. ^ Beall, Jeffrey. Science Magazine Conducts Sting Operation on OA Publishers. Scholarly Open Access. [2013-10-22]. （原始內容存檔於2013-10-12）. 
  13. ^ 13.0 13.1 13.2 Davis, Phil. Open Access "Sting" Reveals Deception, Missed Opportunities. The Scholarly Kitchen. 2013-10-04 [2013-10-20]. （原始內容存檔於2021-06-09）. 
  14. ^ DOAJ's response to the recent article in Science entitled "Who's Afraid of Peer Review?". Directory of Open Access Journals. 2013-10-04 [2013-10-22]. （原始內容存檔於2013-10-23）. 
  15. ^ Peer review map. Science. AAAS. [2013-10-21]. （原始內容存檔於2017-03-07）. 
  16. ^ Oransky, Ivan. Fallout from Science's publisher sting: Journal closes in Croatia. Retraction Watch. 2013-10-17 [2021-06-11]. （原始內容存檔於2013-10-25）. 
  17. ^ Second response to the Bohannon article. Directory of Open Access Journals. 2013-10-18 [2013-10-21]. （原始內容存檔於2013-11-10）. 
  18. ^ Redhead, Claire. OASPA's response to the recent article in Science entitled "Who's Afraid of Peer Review?". Open Access Scholarly Publishers Association. 2013-11-11 [2013-11-11]. （原始內容存檔於2021-05-08）. 
  19. ^ Redhead, Claire. OASPA's second statement following the article in Science entitled "Who's Afraid of Peer Review?". Open Access Scholarly Publishers Association. 2013-10-04 [2013-11-11]. （原始內容存檔於2021-05-06）. 
  20. ^ Gamboa, Camille. Statement by SAGE on the Journal of International Medical Research. Sage. [2013-11-22]. （原始內容存檔於2013-10-14）. 
  21. ^ Shaffi, Sarah. OASPA reinstates Sage membership. The Bookseller. 2014-04-29 [2014-06-02]. （原始內容存檔於2018-10-14）. 
  22. ^ Redhead, Claire. Dove Medical Press reinstated as OASPA Members. 2015-09-23 [2015-09-29]. （原始內容存檔於2020-11-28）. 
  23. ^ Basken, Paul. Critics Say Sting on Open-Access Journals Misses Larger Point. The Chronicle of Higher Education. 2013-10-04 [2013-10-20]. （原始內容存檔於2013-10-21）. 
  24. ^ Davis, Phil. Post Open Access Sting: An Interview With John Bohannon. The Scholarly Kitchen. 2013-11-12 [2013-11-12]. （原始內容存檔於2021-05-09）. 
  25. ^ Eisen, Michael. I confess, I wrote the Arsenic DNA paper to expose flaws in peer-review at subscription based journals. [2013-10-21]. （原始內容存檔於2018-09-24）. 
  26. ^ Peter Suber. New "sting" of weak open-access journals.. [2021-06-11]. （原始內容存檔於2021-06-11）. 
  27. ^ Yirka, Bob. Research paper publishing sting reveals lax standards of many open-access journals. Phys.org. 2013-10-04 [2013-10-20]. （原始內容存檔於2021-06-06）. 
  28. ^ Tatalović, Mićo. Sting exposes 'wild west' of open-access publishing. Scidev.net. 2013-03-10 [2013-10-20]. （原始內容存檔於2017-12-17）. 
  29. ^ Mudur, G S. Dubious journal fear stalks India. The Telegraph. 2013-10-03 [2013-10-20]. （原始內容存檔於2016-03-04）. 
  30. ^ Shieber, Stuart. Lessons from the faux journal investigation. The Occasional Pamphlet. Harvard Law School. 2013-10-15 [2013-10-20]. （原始內容存檔於2013-10-22）. 
  31. ^ COPE response to Science paper submission of fake paper, by Virginia Barbour, on behalf of COPE council. COPE. 2013-10-10 [2021-06-11]. （原始內容存檔於2020-11-25）. 
  32. ^ Transparency in peer review. Nature Materials. 2011, 10 (2): 81. Bibcode:2011NatMa..10...81.. PMID 21258345. doi:10.1038/nmat2952  . 
  33. ^ Bonnie Swoger. Is this peer reviewed? Predatory journals and the transparency of peer review. Information Culture. Scientific American. 2014-11-26 [2021-06-11]. （原始內容存檔於2015-04-26）. 
  34. ^ Van Noorden, R. Open-access website gets tough. Nature. 2014, 512 (7512): 17. Bibcode:2014Natur.512...17V. PMID 25100463. doi:10.1038/512017a  . 

外部鏈接

取自 "https://zh.wikipedia.org/w/index.php?title=誰害怕同行評審？&oldid=82271725"