研究顯示:人類閱讀與AI語言處理存在關鍵分歧
導語:為什么讀書時有些句子一掠而過,有些卻必須重讀才能讀懂?一項由紐約大學與麻省大學阿默斯特分校完成的新研究,借助大語言模型(LLM)給出部分答案,也揭示了人類與AI語言處理之間的根本分歧。研究團隊用AI——具體來說是神經網絡大語言模型(LLMs)——發現人類閱讀的部分加工過程與AI平行。然而,另一些「我們為何這樣閱讀」的環節無法被這些技術解釋,從而暴露出人類與AI語言處理的分歧,也保留了閱讀某些階段的神秘性。這項發表于《美國國家科學院院刊》(PNAS)的研究顯示:在閱讀的極早時刻,人類與AI以相似方式處理語言——都依賴「預測下一個詞」;但隨著閱讀推進、文本變復雜(往往需重讀),人類的處理方式不同于完全建立在「下一詞預測」之上的AI,因此AI無法解釋我們如何應對這類段落。研究團隊運用眼動追蹤技術,分析了368名成年讀者的閱讀行為,重點考察他們在精心設計的句子(包括被稱為「花園路徑句」的句法歧義句)上停留與重讀每個詞的時間,并將其......閱讀全文
發現決定人類語言功能關鍵基因
為什么人能說話而黑猩猩不能?答案可能就在基因FOXP2 為什么人能說話而其生物學近親黑猩猩卻不能?英國《自然》雜志11月12日刊登研究報告說,答案可能就在基因FOXP2上,這個基因的人類版本與黑猩猩版本僅有兩點小小的不同,但卻因此賦予人類獨特的語言能力。 美國加利福尼亞大學等機構
科研人員開發出RNA基礎語言模型
在真核生物中,RNA轉錄、剪接、翻譯和降解等生物學過程受到順式調控元件、RNA結構和反式作用因子的調控。解析RNA多層次調控,對研究基因表達分子機制和設計RNA藥物具有重要意義。但是,由于調控復雜和數據量不足,構建RNA調控的預測模型面臨挑戰。 近日,中國科學院上海營養與健康研究所研究員張國慶
清華團隊與合作者推出大語言模型RealSafeR1
2月23日,清華大學與瑞萊智慧聯合團隊推出大語言模型RealSafe-R1。研發團隊代表介紹說,實驗數據表明RealSafe-R1安全性提升顯著,“安全增強版DeepSeek”可為更多應用提供可靠堅實基座。連日來,國產開源大模型DeepSeek的優異表現備受關注,其在自然語言處理和多任務推理方面的能
草原土撥鼠有復雜語言-甚至超過人類
最新科學研究顯示,草原土撥鼠可能擁有僅次于人類的語言能力,甚至?超過人類的靈長類近親和海豚等高智商動物,這一結果令許多野生動物專家大跌眼鏡。 據英國《每日電訊報》23日報道,美國北亞利桑那大學的一位生物學家發現,土撥鼠的叫聲包含著豐富內容,可以描述顏色、大小、前進的方向
酶標儀語言界面
通常進口的中高檔酶標儀人機對話多采用英文。這對于某些基層實驗室可能會存在語言方面的困難,從而難以最大限度地發揮酶標儀的作用。為解決這方面的問題,已有一些酶標儀采用了中文界面。這樣就大大方便了廣大基層實驗室技術人員的使用。 綜上所述,盡管酶標儀的發展極為快速,種類繁多,功能也不斷加強,但其最根本
微調大語言模型,科學家開發化學文本挖掘新方法
6月7日,中國科學院上海藥物研究所研究員鄭明月課題組在五項化學文本挖掘任務上對多個大語言模型的能力進行了全面綜合的探究,展現了微調大語言模型成為一種通用高效的生成式文本挖掘方法,為大模型的落地應用提供參考。相關研究發表于《化學科學》。?近兩年,以ChatGPT為代表的大語言模型(LLM)引領了人工智
日本將開發更強日語能力的“大語言模型”人工智能技術
據共同社消息,日本東北大學和日本東京工業大學等團隊計劃開發一種更強日語能力的“大語言模型”,作為生成式人工智能(AI)的基礎技術。該團隊將利用理化學研究所的超級計算機“富岳”學習大量數據,并將在本年度內逐步公開。這一技術的開發將使國內企業和研究人員能夠為自己的公司的服務或研究而自行改良。生成式AI可
360智腦通過中國信通院可信AIGC大語言模型功能評估
原文地址:http://news.sciencenet.cn/htmlnews/2023/6/502739.shtm6月12日,360智腦的360GPT-S2-V8型號產品獲得了中國信息通信研究院(以下簡稱“中國信通院”)“可信AIGC大語言模型基礎能力”評估報告(以下簡稱“報告”),報告顯示必選項
人工智能新模型可解碼DNA隱藏“語言”
DNA包含了維持生命所需的基礎信息。理解這些信息是如何存儲和組織的,一直是20世紀最大的科學挑戰之一。現在,借助GROVER這一基于人類DNA訓練的新型大型語言模型,研究人員有望解碼基因組中隱藏的復雜信息。GROVER由德國德累斯頓工業大學生物技術中心開發,它將人類DNA視為文本,通過學習其規則和上
我國學者提出用好大語言模型實用策略
中新網合肥5月10日電 (記者 吳蘭)當前,大語言模型的應用日益廣泛,覆蓋從文本生成到復雜問題解決等多個領域,如何更好利用AI工具?記者10日從中國科學技術大學獲悉,該校心理學系林志成特任研究員近日在其評論文章中研究提出一項實用策略,幫助更好理解和利用先進的人工智能工具,有效發揮人工智能模型交互的最
人工智能新模型可解碼DNA隱藏“語言”
DNA包含了維持生命所需的基礎信息。理解這些信息是如何存儲和組織的,一直是20世紀最大的科學挑戰之一。現在,借助GROVER這一基于人類DNA訓練的新型大型語言模型,研究人員有望解碼基因組中隱藏的復雜信息。GROVER由德國德累斯頓工業大學生物技術中心開發,它將人類DNA視為文本,通過學習其規則
人工智能新模型可解碼DNA隱藏“語言”
DNA包含了維持生命所需的基礎信息。理解這些信息是如何存儲和組織的,一直是20世紀最大的科學挑戰之一。現在,借助GROVER這一基于人類DNA訓練的新型大型語言模型,研究人員有望解碼基因組中隱藏的復雜信息。GROVER由德國德累斯頓工業大學生物技術中心開發,它將人類DNA視為文本,通過學習其規則和上
人工智能新模型可解碼DNA隱藏“語言”
科技日報北京8月6日電?(記者張佳欣)DNA包含了維持生命所需的基礎信息。理解這些信息是如何存儲和組織的,一直是20世紀最大的科學挑戰之一。現在,借助GROVER這一基于人類DNA訓練的新型大型語言模型,研究人員有望解碼基因組中隱藏的復雜信息。GROVER由德國德累斯頓工業大學生物技術中心開發,它將
我國學者提出用好大語言模型實用策略
當前,大語言模型的應用日益廣泛,覆蓋從文本生成到復雜問題解決等多個領域,如何更好利用AI工具?記者10日從中國科學技術大學獲悉,該校心理學系林志成特任研究員近日在其評論文章中研究提出一項實用策略,幫助更好理解和利用先進的人工智能工具,有效發揮人工智能模型交互的最大潛力。在《自然人類行為》(Natur
人工智能新模型可解碼DNA隱藏“語言”
DNA包含了維持生命所需的基礎信息。理解這些信息是如何存儲和組織的,一直是20世紀最大的科學挑戰之一。現在,借助GROVER這一基于人類DNA訓練的新型大型語言模型,研究人員有望解碼基因組中隱藏的復雜信息。GROVER由德國德累斯頓工業大學生物技術中心開發,它將人類DNA視為文本,通過學習其規則和上
人猿笑聲揭示人類語言起源的隱藏線索
人猿笑聲揭示人類語言起源的隱藏線索 你的笑聲可能仍然攜帶著人猿1500萬年來共享的相同古老節奏。華威大學的一項新研究表明,人類笑聲的節奏在至少1500萬年中保持了驚人的一致性。通過比較人類和其他人猿的笑聲,研究人員發現了證據,表明這種古老的發聲模式可能為人類語言如何逐漸演化提供了寶貴線索。 人類不是
華大基因發布大語言模型驅動新方法,助力罕見病精準防控
人工智能(AI)技術隨著科技的飛速發展已廣泛滲透至多個領域。在生命健康層面,AI憑借其獨特優勢在推動基因組醫學的創新發展中扮演著重要角色,尤其是在罕見遺傳疾病診斷中展現出了巨大的潛力。然而,利用基因測序技術對海量的基因組變異進行大規模、高效精準的致病因素識別,仍然是一個挑戰。因此,基于基因檢測大
文斐:研究解決大型語言模型的存儲瓶頸問題
原文地址:http://news.sciencenet.cn/htmlnews/2023/4/497858.shtm“由于半導體器件的物理限制,摩爾定律已經難以為繼;今后計算機芯片的效率提升將主要來源于體系架構的創新。”華南理工大學計算機科學與工程學院原院長、廣東省計算機學會理事長韓國強對《中國科學
無意識語言處理將改變整個行業
貝勒醫學院的研究人員在《自然》雜志發表了一項顛覆傳統認知的研究。他們發現,在全身麻醉下完全無意識的患者,其大腦仍能以相當復雜的水平處理語言,包括區分名詞、動詞和形容詞,甚至預測即將出現的詞語。這一發現挑戰了關于意識與認知關系的長期假設,并為腦機接口和語言假體研究帶來了新的可能性。問題:無意識的大腦是
對話式繪本閱讀可促進學前孤獨癥兒童語言發展
記者8月6日從中國科學院心理研究所了解到,該所副研究員李晶與合作者開展了一項關于對話式閱讀的隨機對照實驗,探討對話式繪本閱讀能否促進孤獨癥兒童的言語互動(包括言語回應與主動溝通)和參與度,以及是否可以有效遷移至新書籍。相關研究8月1日發表于《孤獨癥與發育障礙雜志》。社交溝通障礙常常是孤獨癥譜系障礙(
IBM團隊研發新編程語言-夢想克隆人類大腦
再創造人類智慧是不可能的,而且我們甚至無法理解大腦如何工作。但是Dharmendra Modha正在與技術巨頭IBM以及各個大學和政府實驗室的團隊合作,嘗試建造一個大腦。 IBM公司設計的神經突出計算機芯片可視化網絡。 這位印度出生的計算機科學家,2006年在硅谷的IBM研究實驗室創
研究發現人類和黑猩猩或共享身體語言
想說“你好”,但不知道當地語言?那么試著揮動你的手。這種在人類中常見的手勢,在和人類最親近的類人猿親戚中也是驚人的相似。現在,一項最新研究辨別出對于兩個物種來說意味著同一件事情的諸多手勢,從而表明這些信號具有生理基礎并且可能從人類最后的共同祖先繼承而來。 通常被用于獲得某人注意、請求或者阻止做
AI論文數量激增但質量下滑:大語言模型重塑科研生態的雙刃劍
ChatGPT之后的科研出版變局二〇二二年底ChatGPT對公眾和學術界全面開放之后,世界各地的研究者在日常交流中開始頻繁告訴同事自己能用這些新的人工智能工具完成更多學術工作;幾乎在同一時間,各大科技期刊的編輯們開始報告一個前所未見的現象——語言表達極其流暢自然而科學實質內容似乎并未顯著增加的投稿數
科學家使用大型語言模型將“做得更多,質量更差”
一項近日公布于預印本平臺arXiv的建模研究顯示,科學家若使用大型語言模型(LLM)輔助研究,將花費更少的時間來完善工作,轉而快速投入新的項目。 研究稱,使用LLM將導致科學家“做得更多,但質量更差,而不是做同樣多的工作,但質量更好”。不過,這種人工智能(AI)工具并不是造成上述結果的全部原因
MOFormer:無需3D結構、基于Transformer的預測語言模型
金屬有機框架(MOF)是具有高比表面積、高孔隙率和結構可設計的結晶性多孔材料,可用于氣體吸附、氣體儲存、氣體分離、催化劑等領域。 然而,MOF 的化學空間非常巨大。發現適合特定應用的最佳 MOF 需要對無數潛在候選材料進行高效、準確的搜索。快速且低成本地為特定任務選擇性能最佳的 MOF 一直具有挑
生物信號處理新框架精準解碼細胞復雜語言
如何精確指揮細胞執行特定任務,是合成生物學發展的關鍵挑戰。7月31日,中國科學院深圳先進技術研究院研究員陳業團隊聯合湖南省農業科學院單楊團隊在《自然-通訊》發表最新研究。他們建立了一套全新的生物信號處理框架,能夠精準“解碼”細胞感知的復雜信號。該研究建立了一個可拓展的、解決復雜信號處理問題的通用基因
李彥宏:自然語言將成為新的通用編程語言
“未來,自然語言將成為新的通用編程語言,你只要會說話,就可以成為一名開發者。”4月16日,百度創始人、董事長兼首席執行官李彥宏在Create 2024百度AI開發者大會上發表的演講指出,“AI正在掀起一場創造力革命,未來開發應用就像拍個短視頻一樣簡單,人人都是開發者。”活動現場 主辦方供圖??現場,
研究稱或可借助手語發現人類語言共同之處
美國一項研究顯示,用手語和用言語表達意思依賴相同的大腦區域。這給研究人類不同語言帶來啟發。 紐約大學研究人員招募兩組志愿者參與一項實驗。一組是居住在紐約市、用美國手語與別人交流的聾人,另一組是住在阿聯酋首都阿布扎比、會說英語的人。 研究人員讓他們看相同照片,打手語或說英語表達照片內容,發現他
這可能是迄今最接近人類語言的聲音
一項新研究顯示,抹香鯨的交流可能比之前想象的更加復雜。研究人員認為,抹香鯨可以將不同的“咔嗒”聲和節奏進行結合、調節,從而創造出復雜的叫聲,這可能是目前發現的最接近人類語言的聲音。這項研究結果5月7日發表于《自然-通訊》雜志。交流對于社會性動物而言十分重要,可以幫助它們做出群體決策,協調共同任務,例
1500種語言可能消失
基于一個類似于預測物種損失的新模型,澳大利亞研究團隊分析了6511種仍在使用或已停止使用的語言后得出結論說,到本世紀末,1500種語言將不再被使用,這相當于每個月有一種語言消失。這項新研究還確定了使語言處于高風險處境的原因,包括更密集的公路網、更高的教育水平甚至氣候變化等。 論文合著者、澳大利亞國