多模態同步語言神經影像數據集發布
大腦在加工語言時，需要實時調動多個腦區的神經元進行協同工作。構建高時空分辨率的神經影像數據可以幫助我們更好地了解各個腦區以及腦區之間的協同合作，對于探索大腦的語言加工機制至關重要。當前已有的開源數據主要針對英文采集，只包括單一模態的神經影像數據，如高空間分辨率的功能核磁共振（fMRI）或高時間分辨率的腦磁圖（MEG），且多使用1小時以內的實驗材料，數據規模有限，無法借助數據需求量大的計算模型進行更全面、更深入的大腦語言加工機制探索。 中國科學院自動化研究所自然語言處理研究組歷時近兩年，采集處理完成了迄今為止國際上規模最大、包括信息最豐富的漢語同步多模態神經影像數據集，并于近日正式對外發布。相關研究成果發表在Scientific Data上。 該數據集是當前國際上最大規模的用于腦語言處理機制研究的多模態同步神經影像數據集，針對12個被試收聽約6個小時故事時的功能核磁共振（fMRI）、腦磁圖（MEG）、每個被試的T1/T2加......閱讀全文
“多模態”技術助推圖像內容安全建設
原文地址：http://news.sciencenet.cn/htmlnews/2023/10/510589.shtm
新研究－創新多模態聯邦學習框架
記者5月4日從天津理工大學獲悉，該校計算機科學與工程學院副教授亓帆及其研究生李帥，針對多模態聯邦學習中常見的模態不兼容問題展開深入研究，提出了一種創新的自適應超圖聚合的多模態聯邦學習框架。近日，該成果論文被計算機視覺和人工智能領域國際公認的頂級會議CVPR?2024錄用。據介紹，現有聯邦學習方法只會
全球首創多模態腫瘤治療系統發布
原文地址：http://news.sciencenet.cn/htmlnews/2023/7/504937.shtm
多模態PET驅動跨學科臨床前期成像
多模態PET驅動跨學科臨床前期成像作者：Sonica van Wyk，Bruker Biospin核分子成像市場產品經理斷層成像是一種廣泛應用于各種領域的成像技術，包括放射學、核醫學，以及地球物理和材料科學。它根據一個物體的截面或投影提供三維信息，常見的例子包括X射線、計算機斷層掃描（CT）、正電子
多模態同步語言神經影像數據集發布
大腦在加工語言時，需要實時調動多個腦區的神經元進行協同工作。構建高時空分辨率的神經影像數據可以幫助我們更好地了解各個腦區以及腦區之間的協同合作，對于探索大腦的語言加工機制至關重要。當前已有的開源數據主要針對英文采集，只包括單一模態的神經影像數據，如高空間分辨率的功能核磁共振（fMRI）或高時間分
多模態同步語言神經影像數據集發布
大腦在加工語言時，需要實時調動多個腦區的神經元進行協同工作。構建高時空分辨率的神經影像數據可以幫助我們更好地了解各個腦區以及腦區之間的協同合作，對于探索大腦的語言加工機制至關重要。當前已有的開源數據主要針對英文采集，只包括單一模態的神經影像數據，如高空間分辨率的功能核磁共振（fMRI）或高時間分
深圳先進院多模態納米探針研究取得進展
近日，材料科學國際學術期刊Advanced Functional Materials發表了中國科學院深圳先進技術研究院納米醫療技術研究中心蔡林濤課題組高篤陽、張鵬飛等研究組成員的最新成果：Highly Bright and Compact Alloyed Quantum Rods wit
新研究為多模態傳感應用提供指導
華東理工大學機械與動力工程學院研究員張博威、教授軒福貞等，提出了一種制造“高載量雙結構單原子”的合成策略，為多模態傳感（多種信息融合感知）的應用提供了指導。相關研究發表于《納米快報》。抗壞血酸（AA）、多巴胺（DA）、尿酸（UA）和一氧化氮（NO）等化合物，廣泛參與生物體的各種生理和病理過程。定量檢
組織任意來源的圖像,實現多模態數據關聯
——蔡司 ZEN Connect 助力材料科學研究 大學、研究機構及工業實驗室的材料研究人員均可以利用蔡司ZEN Connect軟件，整合所有的顯微成像技術（甚至包括非蔡司的系統）來為自己的研究服務。 獲得獨特洞察力，提高效率，節省時間 蔡司 ZEN Connect允許用戶對齊和疊加任意來
多模態文本智能技術助力AI實現智能推理
隨著人工智能（AI）深入各行各業，多模態大模型正在成為AI發展的重要方向之一。近日，第八屆中國模式識別與計算機視覺學術會議（PRCV 2025）在上海召開，“多模態文本智能大模型前沿技術與應用”論壇同期舉辦。來自華南理工大學、哈爾濱工業大學、南開大學、華中科技大學、小紅書及合合信息技術團隊的專家與學
中科聞歌發布優雅多模態文生視頻平臺
8月19日，2024北京人工智能生態大會在北京舉行。會上，中科聞歌董事長王磊發布了優雅（YoYa）多模態文生視頻平臺（以下簡稱YoYa）。YoYa針對視頻內容生產的工業化需求，以及對齊人物、動作、情感、對話等元素的視頻生成技術需求，以人工智能（AI）多模態技術，賦能視頻內容創作全鏈路。據介紹，依托中
蔡司增強在多尺度和多模態圖像工作流程方面的效率
研究人員將實現更快速的FIB-SEM樣品制備、獲得更精準的3D斷層掃描圖像和更完整的數據報告。 德國耶拿，2019年12月2日 現在，材料和生命科學領域的研究人員在研究3D樣品時，可以更快速便捷地獲取樣品更深層次研究區域的信息。借助蔡司Crossbeam 350/550和Atlas 5的新功
Neuron：多模態感覺信息整合與決策的神經機制
2019年10月10日，中國科學院腦科學與智能技術卓越創新中心、中科院靈長類神經生物學重點實驗室、上海腦科學與類腦研究中心空間感知研究組顧勇研究員團隊與瑞士日內瓦大學認知計算神經科學Alexandre Pouget研究組合作在Neuron雜志上發表了題為“Neural Correlates of
10問全球首個多模態地理科學大模型
9月19日，全球首個多模態地理科學大模型“坤元”（Sigma Geography）在京發布。多位同行評審專家用“驚艷”“專業”等詞來描述這款大模型。“坤元”由中國科學院地理科學與資源研究所（以下簡稱地理資源所）聯合中國科學院青藏高原研究所、中國科學院自動化研究所等單位研發，旨在拓寬普通大眾的地理視野
科研人員構建出多模態多任務酶篩選平臺
近日，中國科學院上海營養與健康研究所建立了端到端篩選目標酶的多任務計算框架，提高了功能酶的預測與發現效率，并應用于真菌毒素降解酶的挖掘。近年來，深度學習在酶的結構、功能與性質的大規模預測方面取得了進展。然而，由于缺乏面向多模態輸入和多任務輸出的統一建模能力，現有方法難以滿足高性能功能酶篩選的需求。針
研究揭示多模態大模型涌現類人物體概念表征
人類能夠對自然界中的物體進行概念化，這一認知能力長期以來被視為人類智能的核心。當我們看到“狗”“汽車”或“蘋果”時，不僅能識別它們的物理特征即尺寸、顏色、形狀等，還能理解其功能、情感價值和文化意義。這種多維度的概念表征構成了人類認知的基石。隨著ChatGPT等大語言模型（LLMs）的爆發式發展，一個
多模態AI系統實現肺部感染性疾病精準診療
近日，四川大學華西醫院呼吸與危重癥醫學科教授李為民、研究員王成弟團隊在《創新》上發表了最新研究論文，創新性開發了多模態融合模型，即Multimodal Integration，MMI模型，利用臨床文本、影像圖像、檢驗指標等多維度信息，實現肺部感染性疾病及病原類型精準預測，及時對危重癥進行預警干預。不
“能打字就能做視頻”，智象多模態大模型升級
12月28日，安徽人工智能產業先導區啟動活動在合肥舉行，智象未來科技有限公司（以下簡稱智象未來）作為安徽人工智能產業先導區的零號入駐企業正式落地合肥。活動現場，智象未來正式發布智象多模態生成大模型3.0版。梅濤介紹智象多模態生成大模型3.0? 主辦方 供圖“智象多模態生成大模型3.0版全面升級圖像和
科研人員提出高效時空多模態圖神經網絡
近日，中國科學院合肥物質科學研究院團隊提出了高效時空多模態圖神經網絡（ET_MGNN）新型深度學習框架，提升了阿爾茨海默病和自閉癥譜系障礙等腦疾病的自動診斷準確率。理解大腦的復雜活動需同時關注功能協調和結構解剖。然而，現有的腦網絡學習模型在處理動態建模和多模態信息融合方面存在局限。為克服這些挑戰，研
國際最大規模多模態同步語言神經影像數據集發布
大腦在加工語言時，需要實時調動多個腦區的神經元進行協同工作。構建高時空分辨率的神經影像數據可以幫助我們更好地了解各個腦區以及腦區之間的協同合作，對于研究大腦的語言加工機制至關重要。當前已有的開源數據主要針對英文采集，只包括單一模態的神經影像數據，如高空間分辨率的功能核磁共振或高時間分辨率的腦磁圖，并
多模態融合方法劃分質譜成像數據感興趣區域
原文地址：http://news.sciencenet.cn/htmlnews/2023/4/498367.shtm4月11日，中國科學院深圳先進技術研究院醫工所傳感中心羅茜團隊在質譜成像數據分析領域獲得重要進展，成功開發了一種多模態融合驗證的空間分割新方法，可以準確可靠地確定質譜成像數據的感興趣區
研究為天體目標分類提出新型多模態神經網絡
在現代天文研究中，準確識別天體類型是理解宇宙結構、星系演化及暗物質分布等關鍵科學問題的基礎。由于不同類型的天體輻射機制存在顯著差異，天文學家通常依賴光譜觀測進行分類。然而，獲取光譜需耗費大量觀測資源且難以在大規模巡天中實現全面覆蓋。因此，目前大多天體缺乏光譜數據，進而長期制約學界對宇宙中海量天體的系
近紅外發光量子棒可用于構建多模態納米探針
隨著多模態成像技術的發展，迫切需要開發與多模態成像系統相應的新型多模態造影劑，即只需一次注射一種造影劑，便可實現兩種或多種成像功能。目前磁共振成像(MRI)采用非侵入性監測方式深入組織，可提供解剖的細節和高質量的軟組織的三維圖像，但是其靈敏度相比放射性或光學方法而言較低；近紅外熒光成像 (N
多模態感覺信息整合與決策的神經機制研究獲進展
10月10日，《神經元》期刊在線發表了題為《利用線性不變概率性群體編碼實現基于復雜多模態感覺信息的最優決策》的研究論文，該研究由中國科學院腦科學與智能技術卓越創新中心（神經科學研究所）、中科院靈長類神經生物學重點實驗室、上海腦科學與類腦研究中心空間感知研究組與瑞士日內瓦大學認知計算神經科學研究組
多模態神經影像學在癲癇網絡中的研究進展
癲癇（epilepsy）是大腦神經元反復異常放電導致的病理性腦功能障礙性疾病，全球大約有6500萬癲癇患者，其中有20%~40%為藥物難治性癲癇。運用多模態的研究方法發現，癲癇的發生和傳播是由于致癇皮質的癲癇網絡異常而不是單純的致癇灶的病變所引起，同時抑制或破壞致癇皮質的癲癇網絡將為手術治療癲癇
全球首個！多模態地理科學大模型“坤元”在京發布
中國科學院地理科學與資源研究所于9月19日在北京舉行新聞發布會，正式發布全球首個多模態地理科學大模型“坤元”(Sigma Geography)，旨在推動地理學與人工智能深度融合。 該大模型是專注于地理科學的專業語言大模型，具備處理地理科學相關問題的專業能力，研發團隊完成了地理學全譜系高質量語料
多模態行為評價系統在酸奶感官測試研究中的應用
隨著經濟水平的不斷發展，人民生活水平的不斷提高，關于食品飲料方面的研究愈發受到關注。眾所周知，日常生活中，消費者在做出購買選擇時，會考慮諸多因素：品牌、價格、包裝、安全性、營養性等。消費者的選擇結果側面反映出其對該產品的接受度及消費偏好。感官特性是影響消費者對食品接受度和消費偏好的一個重要因素。感官
學者提出融合多模態數據的荔枝霜疫霉病預測模型
近日，華南農業大學電子工程學院（人工智能學院）高級實驗師陸健強課題組首次提出了融合多模態數據的荔枝霜疫霉病預測模型，為荔枝霜疫霉病的精準預測提供了新的研究思路與方法。相關成果發表于《IEEE物聯網期刊》（IEEE Internet of Things Journal）。荔枝是我國南方的重要經濟作物，
我國科學家在多模態神經形態感知研究方面獲進展
軀體感受系統中的多模態感知可幫助人們獲得更全面的物體屬性，并對物體的狀態做出準確判斷。尤其是不同受體的感覺信號在一定的條件下還可被神經元整合并發送到大腦皮層作進一步處理（圖1a）。與單模態感知相比，多模態融合感知在評估物體屬性和提高物體識別精度方面具有明顯優勢。在傳統的人工感知系統中，多
仿生多模態調控智能纖維助力可穿戴呼吸監測系統開發
東華大學教授劉宣勇、副研究員邱家軍團隊，首創了一種仿生氣液兩相流氣泡誘導凝膠液界面動態變形方法，構建出具有周期性異形結構的功能纖維，實現了纖維在人體微環境中對濕度變化的快速響應與水伏能量采集，為未來開發可穿戴醫療設備與健康監測系統提供了全新技術路徑。相關研究近日發表于《自然-通訊》。受蜘蛛噴絲口結構