“您點(diǎn)一下這個(gè)網(wǎng)絡(luò)門診，醫(yī)生就可以在線幫您看病開藥了?！苯?，家住洞頭的婁奶奶在孫子幫助下，第一次用手機(jī)完成了線上診療?！耙院筚I降血糖的藥不用專程跑一趟了，藥還能郵寄到家，真方便！”婁奶奶笑著說。
嘈雜的門診大廳、冗長的取藥隊(duì)伍、尋找不便的門診科室……類似的就醫(yī)體驗(yàn)不少人都經(jīng)歷過。如今，溫州醫(yī)科大學(xué)附屬第一醫(yī)院打造了基于多模態(tài)大模型技術(shù)構(gòu)建全周期健康管理生態(tài)新體系的項(xiàng)目（以下簡稱多模態(tài)大模型），以上的經(jīng)歷將逐漸成為歷史。據(jù)悉，該項(xiàng)目是2024年“數(shù)據(jù)要素×”大賽浙江分賽二等獎(jiǎng)作品，現(xiàn)已入圍全國總決賽。
多模態(tài)大模型是一種基于深度學(xué)習(xí)的機(jī)器學(xué)習(xí)技術(shù)，其核心思想是能整合處理不同形式的數(shù)據(jù)，通過學(xué)習(xí)不同模態(tài)之間的關(guān)聯(lián)與交互，實(shí)現(xiàn)更加智能化和綜合性的信息處理。
當(dāng)多模態(tài)大模型技術(shù)與智慧醫(yī)療相碰撞，又將擦出怎樣的火花？“利用這項(xiàng)技術(shù)，我們搭建了智能預(yù)就診、智能陪診等多個(gè)系統(tǒng)，結(jié)合患者人臉識別、就診進(jìn)度、診療信息等數(shù)據(jù)，就可無感實(shí)現(xiàn)簽到、就診信息推送、特檢自動(dòng)掛號等功能，以簡化就診流程，減少患者來院時(shí)間和次數(shù)。”溫州醫(yī)科大學(xué)第一臨床醫(yī)學(xué)院（信息與工程學(xué)院）、附屬第一醫(yī)院院長、黨委副書記張純武說。
在溫醫(yī)大附一院南白象院區(qū)的模擬診室，工作人員詳細(xì)演示了患者就診的流程——
診前階段，患者打開“溫醫(yī)一院”APP，點(diǎn)擊智能預(yù)約，即可進(jìn)入“智能預(yù)就診系統(tǒng)”。該系統(tǒng)利用虛擬醫(yī)生進(jìn)行AI問診，通過多輪、多形式的主動(dòng)式交互，引導(dǎo)患者描述病情，并智能匹配相應(yīng)的科室和醫(yī)生，實(shí)現(xiàn)精準(zhǔn)預(yù)約。
就診當(dāng)天，智能陪診系統(tǒng)會(huì)提前推送消息提醒患者就診。當(dāng)患者到達(dá)醫(yī)院入口，大廳攝像頭自動(dòng)進(jìn)行無感人臉識別完成身份驗(yàn)證，后臺(tái)同步自動(dòng)簽到并推送相關(guān)就診信息及診室位置，結(jié)合院內(nèi)導(dǎo)航功能，引導(dǎo)患者迅速到達(dá)診室。
接診時(shí)醫(yī)生可對診前虛擬醫(yī)生AI預(yù)問診時(shí)生成的病歷草稿進(jìn)行修改，或直接讓AI整理接診期間的醫(yī)患對話語音，重新生成病歷草稿，減少文書耗時(shí)，以留下更多的醫(yī)患溝通時(shí)間。
就診結(jié)束醫(yī)生開具處方，院內(nèi)藥房自動(dòng)發(fā)藥機(jī)完成配藥后，系統(tǒng)會(huì)為患者推送最優(yōu)取藥窗口以及路徑導(dǎo)航，引導(dǎo)患者前往。
診后當(dāng)患者收到檢查檢驗(yàn)云影像報(bào)告與圖像的推送時(shí)，同時(shí)將有人工智能自動(dòng)輔助患者初步解讀報(bào)告結(jié)果。真正實(shí)現(xiàn)全周期健康管理。
“通過該項(xiàng)目，我們讓信息‘多跑腿’，患者‘少走路’。這不僅能提高醫(yī)療服務(wù)的效率，改善患者就醫(yī)感受，還確保了醫(yī)療信息的準(zhǔn)確性和安全性?！睆埣兾浣榻B，作為一家有著105年建院歷史的三甲醫(yī)院，溫醫(yī)大附一院年門急診量590萬人次，輻射浙南閩北贛東近3000萬人口。該項(xiàng)目實(shí)施以來，構(gòu)建了8148個(gè)檢驗(yàn)檢查診斷知識庫與模型，累計(jì)服務(wù)醫(yī)生280.6萬人次，服務(wù)患者302.9萬人次。目前，患者從預(yù)約到離院的整個(gè)診中環(huán)節(jié)，平均用時(shí)從過去3小時(shí)縮短至30分鐘內(nèi)，同一患者來院次數(shù)同比下降3%。診前的溫馨提醒幫助減少18萬號源浪費(fèi)，診中的檢查自動(dòng)預(yù)約協(xié)助減少排隊(duì)量13.98萬人次，預(yù)住院率提高25%?；颊呖床◇w驗(yàn)更好，醫(yī)院管理效率更高。
據(jù)介紹，溫醫(yī)大附一院將進(jìn)一步完善院前健康管理平臺(tái)，利用患者數(shù)據(jù)構(gòu)建更加精準(zhǔn)的個(gè)性化健康管理方案，提升院前健康干預(yù)，幫助更多患者實(shí)現(xiàn)“治未病”。（記者 黃榮杰）
