醫(yī)療行業(yè)也在被數(shù)字化重塑,隨著AI大模型不斷深入行業(yè)、產(chǎn)業(yè),“數(shù)智化”現(xiàn)代醫(yī)療的建設(shè)承載了許多期待。
只不過(guò),在醫(yī)療這個(gè)非常嚴(yán)肅的場(chǎng)景中落地大模型,既要對(duì)抗大模型幻覺(jué)等可控性問(wèn)題,還要讓大模型符合醫(yī)療的邏輯。另外,AI距離社會(huì)化的“好用”也在歷經(jīng)磨合期,如何讓AI“飛入尋常百姓家”,讓更多患者切身享受到AI為醫(yī)療帶來(lái)的便利?都是目前醫(yī)療行業(yè)信息工作者所關(guān)注的問(wèn)題。
上海市第一人民醫(yī)院,一家有著160年歷史的老牌醫(yī)院,如今作為AI醫(yī)療應(yīng)用落地的排頭兵,正努力嘗試為醫(yī)生、為患者、為醫(yī)療行業(yè)做些什么。
作為上海核心三甲醫(yī)院,互聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能等先進(jìn)信息技術(shù)很早就被上海市一醫(yī)院注入動(dòng)脈。
“十三五”期間,上海市一醫(yī)院曾提出了“SMART”智慧醫(yī)院建設(shè)框架理論,即S:Service,智慧醫(yī)療服務(wù);M:Management,智慧管理;A:Architecture,智慧后勤;R:Research,智慧科研;T:Technology,新技術(shù)運(yùn)用,形成了“五位一體”的智慧醫(yī)院信息化框架。
這與麥肯錫對(duì)智慧醫(yī)院五大要素的定義不謀而合:跨機(jī)構(gòu)互聯(lián)互通、自動(dòng)化高效運(yùn)營(yíng)、全流程重塑體驗(yàn)、大數(shù)據(jù)驅(qū)動(dòng)決策以及持續(xù)性創(chuàng)新機(jī)制,并且這五大要素也是構(gòu)建未來(lái)醫(yī)院的關(guān)鍵組成部分。
自2022年初,有關(guān)“未來(lái)醫(yī)院”的相關(guān)試點(diǎn)工作已經(jīng)在上海落地布局,彼時(shí)《上海市“便捷就醫(yī)服務(wù)”數(shù)字化轉(zhuǎn)型2.0工作方案》公布了三大“未來(lái)醫(yī)院”試點(diǎn)醫(yī)院,上海市一醫(yī)院位列其中。
“上海發(fā)改委當(dāng)時(shí)發(fā)文要求大家探索打造有別于傳統(tǒng)智慧醫(yī)院的未來(lái)醫(yī)院,三家試點(diǎn)單位各有自己的主題,我們的主題跟其他兩家還不太一樣。”上海市第一人民醫(yī)院信息科處長(zhǎng)傅春瑜表示:“上海市一醫(yī)院是從公立醫(yī)院高質(zhì)量發(fā)展、老百姓獲得感、社會(huì)廣泛認(rèn)可度這幾個(gè)角度出發(fā)。所以我們的slogan是‘做老百姓看得見(jiàn)摸得著的智慧醫(yī)院’。”
醫(yī)療行業(yè)是尤其看重“以人為本”的行業(yè),老百姓作為醫(yī)院的服務(wù)對(duì)象,是未來(lái)醫(yī)院構(gòu)造全過(guò)程的中心點(diǎn)。醫(yī)療與人工智能大模型等新技術(shù)的碰撞,目的不是以先進(jìn)技術(shù)為噱頭去做一些很炫的應(yīng)用,而是要思考,人工智能在醫(yī)療應(yīng)用中能夠改造哪些具體的功能?如何把產(chǎn)品整體做得更易用、更好用?
“讓普通人真真實(shí)實(shí)感受到時(shí)代紅利,改變患者原有的不正確的就醫(yī)觀念,這是我們想勾勒的未來(lái)醫(yī)院的樣子。”傅春瑜說(shuō)。
不論先進(jìn)技術(shù)在醫(yī)療行業(yè)如何飛馳,它無(wú)法飛離這個(gè)行業(yè)看病救人的本質(zhì),一切嘗試的重點(diǎn),是為患者服務(wù)。
據(jù)了解,上海從很久以前就在推行便捷就醫(yī),目前已經(jīng)完成了便捷就醫(yī)1.0-3.0的場(chǎng)景應(yīng)用升級(jí),許多患者服務(wù)已經(jīng)落地實(shí)踐?;卺t(yī)院的數(shù)字化基礎(chǔ),諸如線上掛號(hào)、線上支付,分診、查檢驗(yàn)報(bào)告、導(dǎo)航、打印發(fā)票、復(fù)印病歷等環(huán)節(jié),都可以通過(guò)手機(jī)直接操作。但是,通過(guò)廣泛調(diào)研,上海市一醫(yī)院也證實(shí)了一點(diǎn):“中老年群體線上便捷就醫(yī)并不真的便捷”。
“大部分50歲以上的患者使用頻率不高,他們對(duì)手機(jī)的掌握并不像我們年輕人那么好。況且我們又是一個(gè)老年友好醫(yī)院。”上海市一醫(yī)院信息科副處長(zhǎng)范駿翔說(shuō)到,“所以基于大模型我們有了想法,或許可以設(shè)計(jì)這樣一個(gè)場(chǎng)景,以數(shù)字人為載體,以大語(yǔ)言模型作為人工智能大腦,通過(guò)語(yǔ)音交互的方式,為患者提供雙向交互陪伴式就醫(yī)服務(wù)。”
基于以上構(gòu)思,上海市一醫(yī)院結(jié)合了螞蟻的數(shù)字人技術(shù),附加醫(yī)院私有化部署的大語(yǔ)言模型,打造了上海市首個(gè)基于大模型語(yǔ)音交互的“AI陪診師”,并為它取名“公濟(jì)小壹”。
鈦媒體App了解到,總結(jié)下來(lái),AI陪診師解決了患者就醫(yī)過(guò)程中的三個(gè)痛點(diǎn)問(wèn)題。
第一,老年人與智能手機(jī)等工具的交互存在數(shù)字鴻溝。AI陪診師利用多模態(tài)交互技術(shù),老年患者通過(guò)文本或語(yǔ)音與AI陪診師互動(dòng),就能獲得清晰的語(yǔ)音版和文本版就醫(yī)指導(dǎo),縮短數(shù)字鴻溝。
第二,服務(wù)流程復(fù)雜,患者暈頭轉(zhuǎn)向。就醫(yī)過(guò)程中,患者往往會(huì)被復(fù)雜的服務(wù)流程搞得焦頭爛額,這個(gè)問(wèn)題的本質(zhì)在于醫(yī)院場(chǎng)景醫(yī)療服務(wù)的碎片化,出現(xiàn)“人找服務(wù)找不到”的情況。大模型加持下的AI陪診師實(shí)現(xiàn)了“服務(wù)找人”,將碎片化的智能預(yù)約、智能導(dǎo)診、智能預(yù)問(wèn)診、智能院內(nèi)導(dǎo)航、智能診后管理等便捷就醫(yī)服務(wù)聯(lián)動(dòng)起來(lái)。
第三,就醫(yī)鏈路易中斷。如何掛號(hào)、去哪兒就診、什么時(shí)候抽血、什么時(shí)候拿檢驗(yàn)結(jié)果……對(duì)于就醫(yī)流程不熟悉的患者來(lái)說(shuō),能夠條清屢晰地“該干什么干什么”確實(shí)有一定難度。AI陪診師可以根據(jù)患者的就診情況主動(dòng)為患者提供下一步引導(dǎo),覆蓋診前、診中、診后全流程。鈦媒體App了解到,當(dāng)前,上海市一醫(yī)院聯(lián)合螞蟻?zhàn)隽司糯箢?0+個(gè)細(xì)分意圖,意圖識(shí)別準(zhǔn)確率在90%以上,上海市一醫(yī)院稱,接下來(lái)準(zhǔn)確率有望提高到95%。
那么,AI陪診師的實(shí)際應(yīng)用究竟如何?鈦媒體App也進(jìn)行了現(xiàn)場(chǎng)體驗(yàn):打開(kāi)支付寶,平臺(tái)若定位到上海市一醫(yī)院,就會(huì)首頁(yè)直接顯示“AI陪診師”入口,找到“公濟(jì)小壹”,可以語(yǔ)音或文字形式提出困惑,如“我的眼睛出現(xiàn)了一個(gè)黑點(diǎn),這是怎么了?”“公濟(jì)小壹”會(huì)回答當(dāng)前可能的疾病征兆,提出科室掛號(hào)建議,同時(shí)附上相應(yīng)掛號(hào)入口。
掛號(hào)后,手機(jī)攝像頭就會(huì)自動(dòng)開(kāi)啟,通過(guò)實(shí)景AR技術(shù),我們只要舉起手機(jī),屏幕里引路的小熊貓就會(huì)在前方帶路至診室,主動(dòng)播報(bào)前方還有多少人候診。當(dāng)醫(yī)生開(kāi)具檢查項(xiàng)目后,又會(huì)引導(dǎo)患者應(yīng)該完成檢查、繳費(fèi)和取藥。不過(guò),要讓AI陪診師針對(duì)患者問(wèn)題給出更精準(zhǔn)的科室推薦,螞蟻和上海市一醫(yī)院還在意圖識(shí)別能力之外,為AI陪診師添加了多輪導(dǎo)診、知識(shí)庫(kù)問(wèn)答、院內(nèi)流程串聯(lián)的核心能力。
醫(yī)療是一個(gè)非常嚴(yán)肅的場(chǎng)景,想要在醫(yī)療行業(yè)調(diào)動(dòng)整個(gè)大模型的可行性,還要從細(xì)分領(lǐng)域入手。上海市一醫(yī)院又將服務(wù)對(duì)象定位在了醫(yī)生群體,讓大模型先替代勞動(dòng)力附加值不高“病歷書(shū)寫(xiě)”,幫助醫(yī)生自生成電子病歷。
范駿翔介紹:“當(dāng)時(shí)探索的切入點(diǎn)其實(shí)很簡(jiǎn)單,我們第一人民醫(yī)院的優(yōu)勢(shì)學(xué)科是眼科,眼科手術(shù)量最大的是白內(nèi)障手術(shù),70%以上的患者是日間病房出入院的。所謂日間病房就是患者在上午入院,最快他下午就可以出院,整個(gè)流程是非??斓?。臨床流程的加快,使得病歷書(shū)寫(xiě)成為了瓶頸。大量的醫(yī)生在下班后甚至要完成一天中近100臺(tái)手術(shù)的病歷文書(shū)。”
上海市一醫(yī)院調(diào)研總結(jié),醫(yī)生書(shū)寫(xiě)一份病歷的時(shí)間大概在5到10分鐘。如果按照每天近100份病歷的工作量,假設(shè)每份病歷都以最快時(shí)效5分鐘完成,醫(yī)生一天至少要花費(fèi)8個(gè)小時(shí)在病歷書(shū)寫(xiě)上。
“機(jī)械化的工作耗費(fèi)了年輕醫(yī)生大量的時(shí)間和精力,有何舉措能夠?qū)⑺麄儚闹貕褐陆饷摮鰜?lái),是需要我們思考的問(wèn)題。” 上海市一副院長(zhǎng)、眼科中心主任孫曉東表示。
基于這樣的痛點(diǎn)場(chǎng)景,上海市一醫(yī)院與螞蟻探索出了基于大語(yǔ)言模型電子病歷生成的模式,據(jù)了解,這也是全國(guó)首個(gè)“大模型生成式電子病歷”。
為方便醫(yī)生使用,“大模型生成式電子病歷”提供了結(jié)構(gòu)化輸入方式和語(yǔ)音文本輸入方式。輸出內(nèi)容方面,它能直接通過(guò)AI生成手術(shù)記錄、出院小結(jié)和入院記錄,然后為醫(yī)生標(biāo)注差異化,最終在醫(yī)生確認(rèn)后生成病歷。
不過(guò)聽(tīng)起來(lái)簡(jiǎn)單,讓大模型生成的病歷真正“可用”,還要解決大模型的“幻覺(jué)”問(wèn)題。螞蟻集團(tuán)大模型技術(shù)總監(jiān)陶東杰告訴鈦媒體App,電子病歷生成的背后其實(shí)依賴于兩部分:一部分是醫(yī)院內(nèi)部的數(shù)據(jù),另一部分是模型的推理能力。在醫(yī)療這個(gè)不容出錯(cuò)的領(lǐng)域,不可避免地會(huì)涉及大模型可控性挑戰(zhàn)。
如何讓大模型生成的內(nèi)容有據(jù)可依?陶東杰表示,螞蟻用到了知識(shí)增強(qiáng)、推理增強(qiáng)、檢索增強(qiáng)三個(gè)技術(shù)。以知識(shí)增強(qiáng)為例,大量的醫(yī)生參與進(jìn)行了梳理工作,形成了大量的醫(yī)療診斷知識(shí)邏輯。范駿翔稱,上海市一醫(yī)院對(duì)不同的病種進(jìn)行了知識(shí)圖譜的梳理,還按照病歷元素、段落、模板進(jìn)行了文書(shū)的場(chǎng)景化錄入。
值得注意的是,結(jié)構(gòu)化能力對(duì)于模型推理表現(xiàn)尤為重要。例如醫(yī)生口述文本到最終生成病歷的過(guò)程,需要把原始輸入文本先結(jié)構(gòu)化成正確簡(jiǎn)潔的信息,再生成結(jié)果。其中,診斷抽取、Json結(jié)構(gòu)化、完整性、綜合性幾個(gè)維度都是考量標(biāo)準(zhǔn)。
陶東杰稱:“我們對(duì)比了被稱為閉源天花板的GPT4和開(kāi)源的ChatGLM2等開(kāi)源模型,發(fā)現(xiàn)GPT4的診斷抽取會(huì)正確,但是比較啰嗦。而開(kāi)源的模型其實(shí)表現(xiàn)都還是不太行的。”最終,螞蟻的做法是和上海市一醫(yī)院一起微調(diào)了數(shù)據(jù)模型,發(fā)現(xiàn)這樣可以在幾個(gè)維度上均衡表現(xiàn)不錯(cuò),小樣本測(cè)試顯示,其準(zhǔn)確率可以達(dá)到90%以上。在近日舉辦的2024世界人工智能大會(huì)上,支付寶多模態(tài)醫(yī)療大模型正式發(fā)布。據(jù)介紹,基于螞蟻百靈大模型的多模態(tài)能力,該模型支持千億級(jí)別參數(shù)醫(yī)療視覺(jué)識(shí)別。
最終效果上,通過(guò)大模型生成電子病歷,上海市一醫(yī)院能將原本5到10分鐘的工作時(shí)長(zhǎng)縮減到15至20秒。也就是說(shuō),原本一天8個(gè)小時(shí)的病歷書(shū)寫(xiě)時(shí)間,現(xiàn)在可以濃縮至25分鐘,效率增長(zhǎng)了近20倍。
孫曉東表示:“讓醫(yī)生能從繁瑣的文書(shū)工作中解脫出來(lái),我們希望讓他們有更多的時(shí)間回歸臨床本質(zhì)。”接下來(lái),上海市一醫(yī)院還要開(kāi)展電子病歷質(zhì)控的工作,意圖將三甲醫(yī)院高水平醫(yī)生的經(jīng)驗(yàn)積累下來(lái),未來(lái)推廣至基層醫(yī)院等醫(yī)療資源欠發(fā)達(dá)的地方。(本文首發(fā)鈦媒體APP 作者 | 賈雨微 編輯 | 秦聰慧)
快報(bào)
根據(jù)《網(wǎng)絡(luò)安全法》實(shí)名制要求,請(qǐng)綁定手機(jī)號(hào)后發(fā)表評(píng)論
數(shù)字化也在助力醫(yī)院
大模型加持下的AI陪診師,實(shí)現(xiàn)了服務(wù)找人。
生成是AI縮短了病例的書(shū)寫(xiě)時(shí)間
AI的功能確實(shí)強(qiáng)大。
期待醫(yī)療行業(yè)數(shù)字化發(fā)展。
AI的應(yīng)用場(chǎng)景是越來(lái)越廣泛了。