武夷山：改善科學測度學之科學性

　　2008年11月10日，我曾在科學網博客發文介紹美國國家科學基金會的“科學與創新政策學”計劃（http://www.sciencenet.cn/m/user_content.aspx?id=46116）。該計劃的主任叫Julia Jane，她在2010年3月25日出版的Nature雜志上發表了題為《讓我們使科學測度學更科學》（Let’s make science metrics more scientific）的文章。按我的理解，science metrics（科學測度學）這個詞與Scientometrics（科學計量學）幾乎是同義詞。我建議，中國的科學計量學工作者都應認真讀讀這篇文章。下面，我一方面介紹一下此文主要內容，另一方面穿插一些自己的看法。

　　科學測度學依賴于數據，數據的清潔性（質量）特別重要。現在大家比較認可的有湯森路透的Web of Science數據庫、美國國家經濟研究局ZL數據庫（US National Bureau of Economic Research Patent Database），等等。還需要開發更多的面向評估或具有評估功能的數據庫。

　　在數據質量方面，巴西的Lattes Database堪稱典范（見http://lattes.cnpq.br/english/），它搜集了巴西約4000家大學與科研機構的160萬科研人員的科研產出、個人學術簡歷等高質量數據。

　　在科學測度方面，去除人員重名信息極其重要。2009年12月，湯森路透集團和自然出版集團等單位共同發起了ORCID項目（Open Researcher and Contributor ID，“科研人員與投稿者身份識別開放項目”），其意義同科學文獻領域的DOI（數字唯一標示符）是一樣的。DOI好比是科技文獻的身份證，一文一證；ORCID好比是科研人員的學術身份證，一人一證。

　　科學測度基礎工作的規范化特別重要，否則，你搞一套，我搞一套，各自的數據都不能相通，就無法共享。2010年1月，美國國家科學技術理事會下屬的Research Business Model Subcommittee（科研商業模式分委員會）推薦了一套科研成果報告方式，叫“科研績效進展報告規范”（Research Performance Progress Report）。有了這套規范，每個科研人員就可以用統一的方式開列自己的各類成果：發表的論著、創辦的網站、作的學術報告，等等。

　　科研活動到底產生了怎樣的影響，這是大家都關心的。在美國白宮科技政策辦公室的支持下，美國國立衛生研究院和國家科學基金會牽頭，正在搞一個STAR METRICS項目，其字面意思是“明星測度”，縮略語的展開是Science and Technology’s Reinvestment—Measuring the Effects of Research on Innovation，Competitiveness and Science，意思是“科學技術再投資——研究活動對創新、競爭力和科學的影響”。這個項目的成果值得密切關注。

　　在過去，論著發表類指標受到了最多的青睞，今后，還應關注論著指標之外的其他產出指標，例如：ZL申請數與授權數、開發的產品原型數，等等，甚至還可以統計一下，科研人員制作、在YouTube上發布的科學視頻節目有多少。

　　搞評估，一定要考慮不同領域、不同學科的特點。例如，物理學家很熱衷于用預印本形式發表成果，計算機科學的同行則發表了較多的工作論文，也更喜歡在學術會議上進行交流。今后，在評價不同領域時，應當對期刊論文、預印本論文、工作論文、會議報告、專著等不同形式的成果賦予不同的權重，而不應該用同一套標準評價不同領域。

　　除了上述這些經典性的指標外，還應探索數字環境下的新指標。例如，Andrew W. Mellon基金會和國家科學基金會曾經聯合資助過一個項目，叫MESUR（Metrics from Scholarly Usage of Resources，信息資源的學術利用所產生的測度，見http://www.mesur.org/MESUR.html）。該項目是由美國國立洛斯阿拉莫斯實驗室承擔，在2006年至2008年期間完成的。在這個項目中，人們試圖回答諸如此類的問題：如果一篇論文被搜索的次數較多，被查尋（be queried）的次數較多，讀者閱讀此文花的時間較多，那么該文的價值是否就比較高。

　　測度指標會影響科研人員的行為，因此，這方面的行為科學研究非常重要。否則，你設計出一個指標本希望達到這個目的，但“上有政策，下有對策”，指標測度帶來的最終實際效果也許完全偏離了最初希望達到的目標。

　　總之，科學測度學的任務，不能僅僅滿足于能夠識別出誰是明星科研人員，哪個國家的科學實力最強，哪些研究主題最熱。而要爭取能回答：做一名優秀科學家到底意味著什么？

　　無論在我國還是其他國家，基于科學計量學的評估活動和評估結果總是引起很多爭議。可以看出，盡管存在著爭論，但美國聯邦政府對于這類研究的支持是扎扎實實的。他們希望通過切實可信的研究成果來推進基于科學計量學的科研績效評估，而不是一碰到爭議就退縮，因噎廢食。