·“從醫(yī)院角度，算力是醫(yī)療大模型運用過程中的一個重要障礙。其次，大模型的應用能不能融入醫(yī)療本身的發(fā)展體系值得思考。”

·“相較其他領域，醫(yī)療行業(yè)由于其專業(yè)性與嚴肅性對醫(yī)療場景的問題容錯率低，因此醫(yī)療大模型往往具有極高要求的數(shù)據(jù)訓練標準。”

10月31日，在杭州舉辦的云棲大會上，復旦大學附屬中山醫(yī)院（以下簡稱“中山醫(yī)院”）與人工智能公司光啟慧語發(fā)布了聯(lián)合開發(fā)的多模態(tài)醫(yī)療大模型——“光語醫(yī)療大模型”。

該大模型是由中山醫(yī)院深度參與、針對醫(yī)療場景定制，基于光啟慧語數(shù)百億參數(shù)規(guī)模、萬億token預訓練語料的自研大模型。在自然語言處理中，token是指一組相關的字符序列，例如一個單詞或一個標點符號。

大模型模擬醫(yī)生臨床能力，輔助醫(yī)生進行疾病診斷。圖片來源：光語醫(yī)療大模型

具體而言，光語醫(yī)療大模型基于中山醫(yī)院的醫(yī)療經(jīng)驗、醫(yī)學知識和醫(yī)療數(shù)據(jù)資源，包括線下診療場景的醫(yī)護經(jīng)驗、醫(yī)學文獻指南、循證知識庫，醫(yī)學信息術語、知識圖譜等。由光啟慧語完成進行醫(yī)療大模型優(yōu)化訓練，“中山醫(yī)院優(yōu)質的醫(yī)學訓練語料保證了光語醫(yī)療大模型的回答專業(yè)、可信、可溯源。”光啟慧語首席AI科學家褚崴表示。

在通用能力測評中對比光語醫(yī)療大模型和LLaMA2-70B。

據(jù)介紹，光語醫(yī)療大模型在通用能力測評中，中文知識、數(shù)學、閱讀理解、邏輯推理等方面的表現(xiàn)均大幅領先Meta公司研發(fā)的開源大模型LLaMA2-70B。在USMLE醫(yī)療行業(yè)測評中（USMLE為美國執(zhí)業(yè)醫(yī)師資格考試，是通往美國臨床執(zhí)業(yè)的唯一路徑），光語醫(yī)療大模型與GPT-4能力相當。

對于多模態(tài)醫(yī)療大模型的難點，褚崴表示，相較其他領域，醫(yī)療行業(yè)由于其專業(yè)性與嚴肅性對醫(yī)療場景的問題容錯率低，因此醫(yī)療大模型往往具有極高要求的數(shù)據(jù)訓練標準。

中山醫(yī)院大數(shù)據(jù)人工智能中心主任張紀陽則從醫(yī)院的角度表示，“算力是醫(yī)療大模型運用過程中的一個重要障礙，很多醫(yī)院并不一定能夠建立起這么大的算力群。其次，大模型的應用能不能融入醫(yī)療本身的發(fā)展體系值得思考，包括醫(yī)聯(lián)體（醫(yī)療聯(lián)合體，指將同一個區(qū)域內的醫(yī)療資源整合在一起），還有醫(yī)院的資料、醫(yī)保等等。”

圖片來源：光語醫(yī)療大模型

目前，光語醫(yī)療大模型可以用來協(xié)助醫(yī)生把疾病檢查和檢驗結果進行格式化結構處理，并按照醫(yī)學專業(yè)形式輸出。同時模擬醫(yī)生臨床能力，輔助醫(yī)生進行疾病診斷。比如在體檢場景下，其可以模擬總檢醫(yī)生，在獲得全部檢查結果數(shù)據(jù)后，進行異常項識別、排序，并生成主檢結論建議。

模擬醫(yī)生臨床能力，輔助醫(yī)生進行疾病診斷。圖片來源：光語醫(yī)療大模型