中國科學院香港創(chuàng)新研究院人工智能與機器人創(chuàng)新中心(簡稱「中國科學院香港創(chuàng)新院AI中心」)于3月11日在香港科學園正式發(fā)布最新研發(fā)的面向醫(yī)療垂直領(lǐng)域的AI多模態(tài)大模型——CARES Copilot 1.0。
中國科學院香港創(chuàng)新研究院是中國科學院在港設立的首個國家級新型研發(fā)機構(gòu)。CARES Copilot大模型最早在2023年9月第八屆華為全聯(lián)接大會上亮相。彼時,CARES Copilot已在香港中文大學威爾士親王醫(yī)院和中山大學附屬第一醫(yī)院開始測試,并在經(jīng)鼻顱底手術(shù)和呼吸介入治療手術(shù)中取得了顯著進展。
圖片來自中國科學院香港創(chuàng)新院AI中心官網(wǎng)
據(jù)介紹,CARES Copilot是一個可信賴、可解釋、面向醫(yī)療垂直領(lǐng)域并能與智能醫(yī)療設備高度集成的大模型系統(tǒng)。CARES Copilot 1.0實現(xiàn)了圖像、文本、語音、視頻、MRI、CT、超聲等多模態(tài)的手術(shù)數(shù)據(jù)理解。支持超過100K上下文的長窗口理解和高效分析,能理解超過3000頁的復雜手術(shù)教材,對于年輕醫(yī)生的培訓和教學具有極高的實用價值。此外,該系統(tǒng)能通過深度檢索功能,快速精確地提取手術(shù)教材、專家指南、醫(yī)學論文等專業(yè)文檔的信息,確保其提供的答案具有高度的可信度和可追溯性。經(jīng)測試,系統(tǒng)能在一秒鐘內(nèi)完成百萬級數(shù)據(jù)的快速檢索,同時保持95%的準確率。該系統(tǒng)已在多家醫(yī)院的不同科室進行了內(nèi)部測試和迭代優(yōu)化。中國科學院香港創(chuàng)新院AI中心執(zhí)行主任劉宏斌教授介紹,國際醫(yī)學大模型測評榜單結(jié)果顯示,CARES Copilot 1.0多項指標國際排名第一。同時,他強調(diào),中心對CARES Copilot 1.0進行了輕量化部署。作為一個700億參數(shù)的大模型,CARES Copilot 1.0現(xiàn)在可以做到一個消費級的顯卡上,同時保證性能沒有損失,從而可以在每個醫(yī)院,甚至每一個手術(shù)室部署。劉宏斌教授表示,檢驗人工智能技術(shù)價值的唯一目標是看它是否真正能為醫(yī)生賦能,解決他們的痛點,拓展他們的能力邊界,也只有這樣,人工智能技術(shù)才能真正推動人類醫(yī)學的進步。香港中文大學外科學系神經(jīng)外科組主任陳達明教授指出,開放式人工智能已經(jīng)在改變?nèi)祟惖纳?,在醫(yī)療上肯定會做出更大的改變。而轉(zhuǎn)為神經(jīng)科學研發(fā)的大模型,可以超越一般教學的要求,能夠配合手術(shù),影像導航及機器人的大模型應用,在臨床、手術(shù)室及研究院,直接輔助前線醫(yī)護面對突發(fā)狀況,督導、預警、防止手術(shù)步驟風險,推進神經(jīng)科學的疆界。北京協(xié)和醫(yī)院神經(jīng)外科主任醫(yī)師、研究生導師馮銘教授介紹,手術(shù)大模型和手術(shù)導航結(jié)合起來,可以為術(shù)者提供實時的解剖定位信息,提高手術(shù)安全性。首都醫(yī)科大學附屬北京同仁醫(yī)院神經(jīng)外科主任、研究生導師康軍教授認為,AI技術(shù)與手術(shù)機器人技術(shù)相結(jié)合,會給外科手術(shù)的發(fā)展帶來巨大變革,未來無論從手術(shù)方式、理念、器械、設備等方面,神經(jīng)外科醫(yī)生都要應對AI技術(shù)和機器人技術(shù)帶來的新問題和新挑戰(zhàn)。