首頁(yè) > 科技要聞 > 科技> 正文

看個(gè)病都有大模型陪診了！上海市第一人民醫(yī)院主導(dǎo)，一手體驗(yàn)在此

量子位 整合編輯：太平洋科技 發(fā)布于：2024-07-03 12:15

現(xiàn)在看個(gè)病，都有大模型全程陪診了。

這是上海市第一人民醫(yī)院此時(shí)此時(shí)正在發(fā)生的事情——

AI就醫(yī)助理，無(wú)需下載APP，打開(kāi)支付寶就能用。

從診前預(yù)約掛號(hào)、在線(xiàn)取號(hào)，到診中院內(nèi)導(dǎo)航、排隊(duì)叫號(hào)、掃碼支付，再到診后的報(bào)告查詢(xún)、用藥注意等流程，大模型都在旁協(xié)助。

據(jù)介紹，這也是上海首個(gè)基于大模型的AI陪診師公濟(jì)小壹。此次主要是針對(duì)眼科試點(diǎn)，未來(lái)還會(huì)拓展到更多科室。整個(gè)大模型都本地化部署，充分保障數(shù)據(jù)安全。

那么作為第一次去到醫(yī)院的人來(lái)說(shuō)體驗(yàn)究竟如何？這就帶大家沉浸式體驗(yàn)一番。

沉浸式體驗(yàn)大模型陪診

當(dāng)你踏進(jìn)醫(yī)院那一刻，大模型就開(kāi)始工作了。打開(kāi)支付寶時(shí)就會(huì)自動(dòng)彈出相應(yīng)的AI助手界面。

看診前，通過(guò)語(yǔ)音交互進(jìn)行各類(lèi)咨詢(xún)：掛號(hào)、就診、繳費(fèi)、專(zhuān)科/醫(yī)院介紹。

比如，你眼睛不舒服怎么辦？做胃腸鏡應(yīng)該注意些什么？那么這個(gè)AI助手就會(huì)立即給出就診建議，有必要可以?huà)焯?hào)服務(wù)推送。

也不需要專(zhuān)門(mén)去機(jī)器掛號(hào)，線(xiàn)上點(diǎn)擊就可以直接搞定。

完成掛號(hào)之后，可以繼續(xù)詢(xún)問(wèn)當(dāng)前候診信息。

這時(shí)候它就給你實(shí)時(shí)的語(yǔ)音和文字播報(bào)：

當(dāng)前您需要就診，前面排隊(duì)4人，當(dāng)前叫號(hào)66號(hào)，地址位于7號(hào)樓1樓B區(qū)眼科檢查一區(qū)……

在點(diǎn)擊「院內(nèi)導(dǎo)航」之后，通過(guò)手機(jī)攝像頭，就可以跟著一只熊貓，沿著實(shí)景AR路線(xiàn)前往診室。

當(dāng)然你想去這個(gè)醫(yī)院的任何地方，只需一段語(yǔ)音輸入，它就能夠指引，比如就診完成之后需要去藥房取藥，然后直接在小程序上就可以完成支付。

之后像報(bào)告查詢(xún)、用藥注意，都可以直接在手機(jī)上查看，相當(dāng)于形成了自己的健康檔案。

整個(gè)流程下來(lái)，可以總結(jié)這樣幾個(gè)特點(diǎn)。

首先，語(yǔ)音交互。

這是基于在醫(yī)院這一場(chǎng)景下，不少患者尤其像眼科患者，他們不便于閱讀文字，也不熟悉復(fù)雜的線(xiàn)上操作流程。

這也是醫(yī)院引入「數(shù)字陪診師」的初衷，以語(yǔ)音輸入輸出和識(shí)別作為主要的交互方式，數(shù)字虛擬人作為交互載體。

其次，全流程的「主動(dòng)」規(guī)劃指引。

它接入了院內(nèi)服務(wù)接口，包括診前科室引導(dǎo)、診中就診排隊(duì)看病取藥、診后的醫(yī)助提醒。

當(dāng)你進(jìn)入就醫(yī)流程之后，它就開(kāi)始干活，主動(dòng)提示患者如何完成下一步操作。

△主動(dòng)提醒代簽到項(xiàng)目

以往可能需要IOT設(shè)備、短信或者手機(jī)上卡片等形式，但現(xiàn)在只需要小程序就能完成，并且從被動(dòng)操作變成主動(dòng)。

作為用戶(hù)來(lái)說(shuō)，也就不需要搞懂具體流程，只需要跟著他走就好。

另外能看到，大模型在意圖識(shí)別和知識(shí)回答等方面表現(xiàn)更為突出。

意圖識(shí)別這方面，據(jù)介紹共有9大意圖分類(lèi)、30+個(gè)細(xì)分意圖、準(zhǔn)確率最高可達(dá)95%以上。

知識(shí)問(wèn)答則是有本醫(yī)院的專(zhuān)業(yè)醫(yī)師進(jìn)行精調(diào)和標(biāo)注，因此相較于通用大模型，更懂醫(yī)療專(zhuān)科知識(shí)。

最后一個(gè)顯著的特點(diǎn)是，本地化私有化部署。

為了保障數(shù)據(jù)安全，整個(gè)大模型從訓(xùn)練到推理應(yīng)用均是在上海第一人民醫(yī)院完成。

他們有自己的標(biāo)注知識(shí)庫(kù)，基于螞蟻的大模型集成平臺(tái)，本地完成預(yù)預(yù)訓(xùn)練（包括醫(yī)囑、診斷數(shù)據(jù)）、SFT等操作來(lái)打造專(zhuān)屬的醫(yī)學(xué)模型。

還上線(xiàn)了AI電子病例

除了AI助手這種面向患者的「看診陪診」需求，此次上海市第一人民醫(yī)院還聯(lián)合支付寶面向醫(yī)生診療需求上線(xiàn)了一個(gè)應(yīng)用——

大模型生成式電子病歷，據(jù)介紹還是全球首個(gè)。

每天他們所面對(duì)的患者數(shù)量很多。尤其像眼科這種，日間病房患者數(shù)量多，也就是患者當(dāng)天完成入院、手術(shù)并出院的一種醫(yī)療模式。

工作節(jié)奏快、強(qiáng)度高，除了日常診療和手術(shù)外，還需要應(yīng)對(duì)繁瑣機(jī)械化的病歷書(shū)寫(xiě)的工作。

基于螞蟻百靈大模型，通過(guò)關(guān)鍵信息的給定、語(yǔ)音輸入等多種形式結(jié)合，就可以自動(dòng)生成病歷，簡(jiǎn)化入院記錄的填寫(xiě)過(guò)程。

一個(gè)具體的數(shù)字是，原本需要5到10分鐘的工作縮減到了15至20秒，顯著節(jié)省了醫(yī)生 “敲鍵盤(pán)”的時(shí)間。

以白內(nèi)障為例，目前醫(yī)院抽取了1萬(wàn)份歷史病歷，將其輸入到大語(yǔ)言模型中進(jìn)行微調(diào)。

在這一過(guò)程中，開(kāi)發(fā)部門(mén)設(shè)計(jì)了相應(yīng)的提示詞，訓(xùn)練模型學(xué)習(xí)如何撰寫(xiě)病史。

團(tuán)隊(duì)表示，后續(xù)醫(yī)院會(huì)進(jìn)一步基于大語(yǔ)言模型進(jìn)行病歷質(zhì)控，幫助醫(yī)生快速定位病歷書(shū)寫(xiě)錯(cuò)誤，不斷提高病歷生成的準(zhǔn)確率。

醫(yī)療，作為重大的民生場(chǎng)景之一。關(guān)于大模型如何落地，其實(shí)也有了不少解決方案。

不管是面向患者的健康助手，還是面向醫(yī)生的電子病歷等等，但像這樣以醫(yī)院為主導(dǎo)，實(shí)現(xiàn)大模型本地化部署的，目前業(yè)內(nèi)算是少數(shù)。他們結(jié)合自身優(yōu)勢(shì)，充分讓大模型發(fā)揮自己的價(jià)值。

未來(lái)這樣的落地經(jīng)驗(yàn)有機(jī)會(huì)向更大范圍復(fù)用，事實(shí)上也有正在進(jìn)行之中。

今年4月，支付寶正式面向全國(guó)醫(yī)院、醫(yī)療機(jī)構(gòu)推出了“AI就醫(yī)助理”解決方案，利用數(shù)字人+AI技術(shù)，助力醫(yī)院提升診療前中后的就醫(yī)服務(wù)體驗(yàn)。

除上海市以外，這套方案也助力了浙江衛(wèi)健委推出數(shù)字健康人“安診兒”，已覆蓋浙江全省92家醫(yī)院，服務(wù)上百萬(wàn)人次。

此次試點(diǎn)成熟之后，他們的專(zhuān)業(yè)知識(shí)以及落地經(jīng)驗(yàn)，也能通過(guò)大模型的方式，朝著更基層的地方落地，實(shí)現(xiàn)真正的普惠。

本文來(lái)源：量子位

網(wǎng)友評(píng)論

聚超值•精選

推薦 手機(jī) 筆記本 影像 硬件 家居 商用 企業(yè) 出行 未來(lái)
    • 二維碼 回到頂部