“您點一下這個網絡門診,醫(yī)生就可以在線幫您看病開藥了?!苯眨易《搭^的婁奶奶在孫子幫助下,第一次用手機完成了線上診療?!耙院筚I降血糖的藥不用專程跑一趟了,藥還能郵寄到家,真方便!”婁奶奶笑著說。
嘈雜的門診大廳、冗長的取藥隊伍、尋找不便的門診科室……類似的就醫(yī)體驗不少人都經歷過。如今,溫州醫(yī)科大學附屬第一醫(yī)院打造了基于多模態(tài)大模型技術構建全周期健康管理生態(tài)新體系的項目(以下簡稱多模態(tài)大模型),以上的經歷將逐漸成為歷史。據悉,該項目是2024年“數據要素×”大賽浙江分賽二等獎作品,現已入圍全國總決賽。
多模態(tài)大模型是一種基于深度學習的機器學習技術,其核心思想是能整合處理不同形式的數據,通過學習不同模態(tài)之間的關聯與交互,實現更加智能化和綜合性的信息處理。
當多模態(tài)大模型技術與智慧醫(yī)療相碰撞,又將擦出怎樣的火花?“利用這項技術,我們搭建了智能預就診、智能陪診等多個系統(tǒng),結合患者人臉識別、就診進度、診療信息等數據,就可無感實現簽到、就診信息推送、特檢自動掛號等功能,以簡化就診流程,減少患者來院時間和次數?!睖刂葆t(yī)科大學第一臨床醫(yī)學院(信息與工程學院)、附屬第一醫(yī)院院長、黨委副書記張純武說。
在溫醫(yī)大附一院南白象院區(qū)的模擬診室,工作人員詳細演示了患者就診的流程——
診前階段,患者打開“溫醫(yī)一院”APP,點擊智能預約,即可進入“智能預就診系統(tǒng)”。該系統(tǒng)利用虛擬醫(yī)生進行AI問診,通過多輪、多形式的主動式交互,引導患者描述病情,并智能匹配相應的科室和醫(yī)生,實現精準預約。
就診當天,智能陪診系統(tǒng)會提前推送消息提醒患者就診。當患者到達醫(yī)院入口,大廳攝像頭自動進行無感人臉識別完成身份驗證,后臺同步自動簽到并推送相關就診信息及診室位置,結合院內導航功能,引導患者迅速到達診室。
接診時醫(yī)生可對診前虛擬醫(yī)生AI預問診時生成的病歷草稿進行修改,或直接讓AI整理接診期間的醫(yī)患對話語音,重新生成病歷草稿,減少文書耗時,以留下更多的醫(yī)患溝通時間。
就診結束醫(yī)生開具處方,院內藥房自動發(fā)藥機完成配藥后,系統(tǒng)會為患者推送最優(yōu)取藥窗口以及路徑導航,引導患者前往。
診后當患者收到檢查檢驗云影像報告與圖像的推送時,同時將有人工智能自動輔助患者初步解讀報告結果。真正實現全周期健康管理。
“通過該項目,我們讓信息‘多跑腿’,患者‘少走路’。這不僅能提高醫(yī)療服務的效率,改善患者就醫(yī)感受,還確保了醫(yī)療信息的準確性和安全性?!睆埣兾浣榻B,作為一家有著105年建院歷史的三甲醫(yī)院,溫醫(yī)大附一院年門急診量590萬人次,輻射浙南閩北贛東近3000萬人口。該項目實施以來,構建了8148個檢驗檢查診斷知識庫與模型,累計服務醫(yī)生280.6萬人次,服務患者302.9萬人次。目前,患者從預約到離院的整個診中環(huán)節(jié),平均用時從過去3小時縮短至30分鐘內,同一患者來院次數同比下降3%。診前的溫馨提醒幫助減少18萬號源浪費,診中的檢查自動預約協(xié)助減少排隊量13.98萬人次,預住院率提高25%。患者看病體驗更好,醫(yī)院管理效率更高。
據介紹,溫醫(yī)大附一院將進一步完善院前健康管理平臺,利用患者數據構建更加精準的個性化健康管理方案,提升院前健康干預,幫助更多患者實現“治未病”。(記者 黃榮杰)