在發現一場國際人工智能(AI)會議21%的稿件評審是由AI生成后,爭議爆發了。
據《自然》報道,許多學者對提交給明年“國際學習表征會議”(ICLR)的稿件和同行評審表示擔憂。他們在社交媒體上指出,其稿件評審中出現了臆造的參考文獻,以及對其工作給予了異常冗長且模糊的反饋。ICLR是一場機器學習專家的年度聚會。
美國卡內基梅隆大學的AI研究員Graham Neubig收到疑似由大型語言模型(LLM)生成的同行評審報告。他說,這些報告“非常冗長,有很多要點”,其要求進行的分析也不是“通常針對典型的AI或機器學習論文,審稿人會要求的標準統計分析”。
但Neubig需要幫助來證明這些報告是由AI生成的。于是,他在社交媒體上發帖,懸賞能掃描所有會議投稿及其同行評審的人,以檢測AI生成的文本。第二天,他收到美國科技公司潘格拉姆實驗室(Pangram)首席執行官Max Spero的回復,該公司開發了檢測AI生成文本的工具。Pangram掃描了所有提交給將于明年4月在巴西里約熱內盧舉行的ICLR 2026會議的19490篇研究和75800份同行評審。Neubig和其他超過1.1萬名AI研究人員將出席此次會議。
Pangram的分析顯示,約21%的ICLR同行評審完全由AI生成,超過一半含有使用AI的跡象。Pangram已將分析結果發布在網上。“人們原本只是懷疑,但沒有具體證據。”Spero說,“在12小時內,我們編寫了一些代碼來解析這些投稿中的所有文本內容。”
ICLR組織者表示,他們現在將使用自動化工具來評估提交的稿件和同行評審是否違反了AI使用政策。美國康奈爾大學的計算機科學家、ICLR 2026高級項目主席Bharath Hariharan表示,這是大會首次大規模地面對這一問題。
Pangram團隊使用了其自行開發的一款工具,該工具可以預測文本是否由LLM生成或編輯。Pangram的分析標記出15899份完全由AI生成的同行評審。但它也識別出許多提交給會議的、疑似含有AI生成文本的稿件:199份稿件(占1%)被發現完全由AI生成;61%的投稿主要由人工撰寫;9%的稿件含有超過50%的AI生成文本。Pangram在一篇預印本論文中描述了該模型。
對于許多收到ICLR評審意見的研究人員來說,Pangram的分析證實了他們的懷疑。丹麥哥本哈根大學的計算機科學家Desmond Elliott說,他收到的3份評審中,有一份似乎“沒有抓住論文的重點”,并且包含了一些奇怪的表達。
ICLR 2026團隊允許作者和審稿人使用AI工具修改文本、生成實驗代碼或分析結果,但要求必須公開此類用途。同時,會議還禁止任何可能會違反稿件保密性或產生偽造內容的AI使用。會議組織者現在將使用Pangram的分析以及其他自動化工具,來評估投稿和評審是否違反了這些政策,并將處罰違規的作者和評審員。
“監督同行評審過程的研究人員將被要求標記低質量的評審,而不僅僅是LLM生成的評審。”Hariharan說,“鑒于這些自動化工具可能存在誤報,我們不會完全依賴它們。”
一些作者已經撤回了他們的ICLR投稿,因為其稿件的同行評審中包含虛假陳述。其他人仍在思考如何回應收到的評審意見。
ICLR 2026的情況凸顯了同行評審員為跟上快速發展的領域而面臨越來越大的壓力。Neubig說:“目前在AI和機器學習領域,我們在評審方面面臨危機,因為過去5年該領域呈指數級擴張。”
Hariharan說,平均每位ICLR評審員被分配了5篇論文,必須在兩周內完成評審,這是一個非常巨大的負荷,遠高于過去的工作量。
Pangram開發的AI檢測工具發現,同行評審員越來越多地使用AI來起草對作者的回復。
8月7日至9日,蘭州大學物理科學與技術學院建院80周年暨第十一屆材料科學與工程國際學術會議(ISAMSE2026)在甘肅蘭州舉行。與會專家學者圍繞先進材料全鏈條前沿創新,開展多層次、跨學科學術研討。丁......
2026年7月25日-27日,第24屆全國分子光譜學學術會議暨第六屆光譜年會在山西省太原市隆重召開。閉幕式上,上海交通大學仲冬平教授、湖南大學張曉兵教授、北京理工大學張韞宏教授、廈門大學顏曉梅教授、華......
近日,中國科協發布《重要學術會議目錄(2025)》,聚焦高水平學術會議的價值引領導向,集中收錄了2025年度已召開的708個重要學術會議。其中包括全國115家學會推薦的610個會議及第二十七屆中國科協......
在發現一場國際人工智能(AI)會議21%的稿件評審是由AI生成后,爭議爆發了。據《自然》報道,許多學者對提交給明年“國際學習表征會議”(ICLR)的稿件和同行評審表示擔憂。他們在社交媒體上指出,其稿件......
中新網北京9月20日電(記者孫自法)中國科學技術信息研究所(中信所)9月20日在北京舉行2024年中國科技論文統計結果發布會透露,在該所組織開展的中國科技核心期刊(科普類)首次申報與遴選工作,以及遴選......
2023年9月23日-24日,第十六屆全國化學傳感器學術會議(SCCS2023)于山東濟南召開。本次會議由中國儀器儀表學會分析儀器分會化學傳感器專家組主辦,濟南大學承辦,化學生物傳感與計量學國家重點實......
近期,中國集中整治醫藥領域腐敗問題,部分學術會議以近期反腐形勢為由宣布暫停或延期舉辦,引發社會關注。中國國家衛生健康委員會在15日發布的有關問答中對此指出,需要整治的是那些無中生有、編造虛假學術會議的......
據國家衛健委網站15日消息,國家衛健委發布全國醫藥領域腐敗問題集中整治工作有關問答。部分學術會議以近期反腐形勢為由宣布暫停或延期舉辦,是否為集中整治的工作要求?衛健委回答稱,注意到媒體反映一些學術會議......
中國分析測試協會第七屆青年學術委員會第五次全體委員會會議暨學術交流會議于2023年7月28-30日在遼寧盤錦舉辦。會議由中國分析測試協會主辦、盤錦檢驗檢測中心承辦,盤錦檢驗檢測與認證協會協辦。六十多個......
LipidALL脂代謝會議由中科院遺傳與發育生物學研究所稅光厚研究員發起,至今已在國內多個城市成功舉辦八屆。豐富的會議主題與優質的會議內容數年來吸引了超過數萬名各地科研人員參與其中,極大推進了脂質/代......