MedGPT：基于權(quán)威RAG評(píng)估框架展現(xiàn)優(yōu)秀醫(yī)療性能

檢索增強(qiáng)生成（RAG，Retrieval-Augmented Generation）技術(shù)正革新AI應(yīng)用領(lǐng)域，它整合外部知識(shí)庫與 LLM（Large Language Model，大語言模型）內(nèi)部知識(shí)，提高了 AI 系統(tǒng)的準(zhǔn)確性和可靠性。多模態(tài)知識(shí)提取器的知識(shí)“召回能力”直接決定了大模型在回答推理時(shí)能否獲得準(zhǔn)確的專業(yè)知識(shí)。但隨著 RAG 系統(tǒng)廣泛應(yīng)用，其評(píng)估和優(yōu)化面臨挑戰(zhàn)。現(xiàn)有的評(píng)估方法難以全面體現(xiàn) RAG 系統(tǒng)的復(fù)雜性和實(shí)際表現(xiàn)。近日，亞馬遜、上海人工智能研究院推出 RAGChecker 診斷工具，可為 RAG 系統(tǒng)提供細(xì)粒度、全面且可靠的診斷報(bào)告，并指明提升性能的操作方向。RAGChecker框架設(shè)計(jì)了包括整體指標(biāo)、診斷檢索器指標(biāo)和診斷生成器指標(biāo)在內(nèi)的一套全面評(píng)估體系。通過對(duì)包含查詢、文檔和真實(shí)答案的樣本進(jìn)行輸入，并借助大型語言模型將文本分解為獨(dú)立的聲明再通過另一個(gè)模型驗(yàn)證每個(gè)聲明的準(zhǔn)確性，實(shí)現(xiàn)對(duì)模型的細(xì)粒度評(píng)估。在相關(guān)研究中，RAGChecker經(jīng)過嚴(yán)格的實(shí)驗(yàn)驗(yàn)證，其與人類判斷的相關(guān)性遠(yuǎn)超 BLEU、ROUGE、BERTScore 等傳統(tǒng)評(píng)估指標(biāo)，這充分彰顯了其科學(xué)性和可靠性。RAGCHECKER的指標(biāo)還可以幫助實(shí)踐者開發(fā)和評(píng)估更有效的RAG系統(tǒng)，并通過調(diào)整RAG系統(tǒng)的設(shè)置（如檢索器的數(shù)量、塊大小、塊重疊比例和生成提示）來提供改進(jìn)建議。基于這樣一個(gè)權(quán)威的評(píng)估框架，我們對(duì)MedGPT這一醫(yī)療垂直大模型進(jìn)行了全面的性能測試。Figure：Illustration of the proposed metrics in RAGChecker本次測試選取了30個(gè)來自專業(yè)醫(yī)生模擬的醫(yī)療專業(yè)問題，測試結(jié)果顯示，MedGPT 在多個(gè)關(guān)鍵指標(biāo)上展現(xiàn)出了顯著的優(yōu)勢(shì)。在整體評(píng)估方面（衡量整個(gè)RAG流程的整體質(zhì)量），MedGPT 的精度（precision）達(dá)到了 65.4，召回（recall）為 58.3，F(xiàn)1 score達(dá)到 59.9，這些指標(biāo)相較于參考原文中提到其他模型的更佳分?jǐn)?shù)在表現(xiàn)出更優(yōu)的得分。這意味著 MedGPT 在處理醫(yī)療問題時(shí)，能夠更精準(zhǔn)地命中關(guān)鍵信息，并且全面地覆蓋問題相關(guān)的知識(shí)領(lǐng)域，為醫(yī)療決策提供有力的數(shù)據(jù)支持。在檢索維度上（查找相關(guān)信息的優(yōu)勢(shì)和劣勢(shì)能力），上下文精度（context precision）達(dá)到 62.2。這表明 MedGPT 在檢索醫(yī)療知識(shí)時(shí)，能夠以較高的精準(zhǔn)度篩選出與問題緊密相關(guān)的內(nèi)容，確保為后續(xù)的答案生成提供高質(zhì)量的素材。而在生成維度（利用檢索到的上下文、處理嘈雜信息以及生成準(zhǔn)確和忠實(shí)響應(yīng)的能力），MedGPT 更是表現(xiàn)出了優(yōu)秀的性能。其上下文利用率（context utilization）為 66.3，充分體現(xiàn)了它能夠高效地整合和運(yùn)用檢索到的醫(yī)療知識(shí)。模型生成響應(yīng)中不正確聲明在相關(guān) chunk 中的噪音敏感度（noise sensitivity in relevant），MedGPT 僅為 16.4；模型生成響應(yīng)中不正確聲明在不相關(guān) chunk 中的噪音敏感度（noise sensitivity in irrelevant）為 4.5，這一數(shù)據(jù)有力地證明了 MedGPT 在處理復(fù)雜醫(yī)療信息時(shí)，具有出色的抗干擾能力，能夠有效過濾掉無關(guān)的噪音信息，專注于生成準(zhǔn)確、有價(jià)值的答案。綜合來看，MedGPT 在醫(yī)療垂直領(lǐng)域的表現(xiàn)已經(jīng)相當(dāng)突出，能夠?yàn)獒t(yī)療專業(yè)人士和患者提供可靠、準(zhǔn)確的醫(yī)療知識(shí)和建議。上述測試結(jié)果有力地證實(shí)，MedGPT 作為專注于醫(yī)療領(lǐng)域的垂直大模型，在應(yīng)對(duì)醫(yī)療專業(yè)問題時(shí)呈現(xiàn)出了優(yōu)秀的性能表現(xiàn)。以其高精準(zhǔn)度、高度可靠性以及強(qiáng)大的抗干擾能力，在醫(yī)療人工智能領(lǐng)域中嶄露頭角。無論是輔助醫(yī)療人員進(jìn)行病癥診斷，還是為患者提供專業(yè)的醫(yī)療咨詢服務(wù)，MedGPT無疑將會(huì)是非常理想的選擇，能夠?yàn)獒t(yī)療行業(yè)的智能化進(jìn)程提供強(qiáng)勁的推動(dòng)力。

2025/01/22

醫(yī)聯(lián)集團(tuán)與深圳市龍崗區(qū)社區(qū)健康服務(wù)管理中心簽署戰(zhàn)略合作協(xié)議共同打造中國首個(gè)基層醫(yī)療全科醫(yī)生智能體

2025年1月8日，為加速推動(dòng)人工智能技術(shù)在醫(yī)療領(lǐng)域的深度應(yīng)用，促進(jìn)深圳市醫(yī)療產(chǎn)業(yè)數(shù)字化轉(zhuǎn)型與高質(zhì)量發(fā)展，深圳市龍崗區(qū)社區(qū)健康服務(wù)管理中心攜手中國首個(gè)醫(yī)療大模型備案企業(yè)醫(yī)聯(lián)集團(tuán)，共同打造中國首個(gè)未來全科醫(yī)生智能體。深圳市龍崗區(qū)社區(qū)健康服務(wù)管理中心主任 徐良玉（右）  醫(yī)聯(lián)集團(tuán)基層醫(yī)療中心總經(jīng)理 李東偉（左）雙方將緊密圍繞基層醫(yī)療健康事業(yè)發(fā)展需求，積極探索醫(yī)療大模型技術(shù)創(chuàng)新與應(yīng)用。此次合作以龍崗區(qū)社區(qū)健康服務(wù)為基礎(chǔ)，深度融合了醫(yī)聯(lián)集團(tuán)的“MedGPT”醫(yī)療人工智能模型技術(shù)，旨在通過智能化的手段，為龍崗區(qū)居民提供個(gè)性化、全流程的家庭醫(yī)生服務(wù)，切實(shí)解決基層高水平醫(yī)生供給不足、醫(yī)療服務(wù)范圍有限，醫(yī)療服務(wù)效率不高等痛點(diǎn)問題，打破基層醫(yī)療服務(wù)的“不可能三角”，將龍崗區(qū)打造成醫(yī)療新質(zhì)生產(chǎn)力的新樣板。2023年我國衛(wèi)生健康事業(yè)發(fā)展統(tǒng)計(jì)公報(bào)中顯示，社康中心/站的貢獻(xiàn)舉足輕重，機(jī)構(gòu)數(shù)量僅占比3.6%門診量占比卻高達(dá)21.2%，成為基層醫(yī)療服務(wù)的中流砥柱，更是城市居民醫(yī)療健康服務(wù)的最重要守門人。基層醫(yī)療是國家醫(yī)療體系的關(guān)鍵一環(huán)，承擔(dān)著為廣大民眾提供基礎(chǔ)性醫(yī)療服務(wù)的重要職責(zé)。然而，由于醫(yī)療資源分布不均衡，高水平醫(yī)生供給不足，目前基層醫(yī)療依然面臨著診斷范圍有限，醫(yī)療服務(wù)水平不高等“老大難”問題。而龍崗區(qū)作為深圳市重要的高新技術(shù)產(chǎn)業(yè)和先進(jìn)制造業(yè)基地，其面積廣闊、人口密集，醫(yī)療健康服務(wù)的需求極為龐大。龍崗區(qū)擁有183家社康中心，是深圳市社康中心數(shù)量最多的行政區(qū)之一，如何高效管理并提升服務(wù)質(zhì)量，一直是龍崗區(qū)社區(qū)健康服務(wù)管理中心面臨的重要課題。作為國內(nèi)醫(yī)療大模型技術(shù)的領(lǐng)軍者，醫(yī)聯(lián)集團(tuán)的MedGPT醫(yī)療人工智能模型，在深厚的技術(shù)積淀之上，歷經(jīng)了大規(guī)模、高精度的專業(yè)醫(yī)療知識(shí)訓(xùn)練，處理了數(shù)以億計(jì)的醫(yī)學(xué)相關(guān)數(shù)據(jù)。醫(yī)聯(lián)MedGPT目前擁有近3000種疾病的首診能力，覆蓋80%以上的成年人疾病和90%以上的0-12歲兒科疾病。MedGPT采用大模型技術(shù)，基于醫(yī)療知識(shí)圖譜為模型提供豐富、準(zhǔn)確、結(jié)構(gòu)化的醫(yī)療知識(shí)，并收集整理接近20億條真實(shí)醫(yī)患溝通對(duì)話、檢驗(yàn)檢測和病例信息進(jìn)行深度訓(xùn)練學(xué)習(xí)，同時(shí)利用醫(yī)生真實(shí)反饋進(jìn)行強(qiáng)化學(xué)習(xí)，用以保障模型的推理質(zhì)量、準(zhǔn)確性與可靠性。經(jīng)驗(yàn)證，醫(yī)聯(lián)medGPT的診斷結(jié)果與患者原有線下門診的診斷吻合率超過97.5%。值得一提的是，醫(yī)聯(lián)MedGPT突破了AI醫(yī)生無法與真實(shí)患者連續(xù)自由對(duì)話的難點(diǎn)，并在醫(yī)療問診場景中支持多模態(tài)的輸入和輸出，在疾病的預(yù)防、診斷、治療、康復(fù)四個(gè)重要環(huán)節(jié)全面實(shí)現(xiàn)智能化。基于此，龍崗區(qū)聯(lián)合醫(yī)聯(lián)集團(tuán)打造未來全科醫(yī)生智能體，為患者提供健康咨詢服務(wù)，探索以AI 助力基層醫(yī)療發(fā)展的新路徑，共同打造“AI醫(yī)生-真人醫(yī)生雙醫(yī)協(xié)同”的基層醫(yī)療服務(wù)新模式。利用先進(jìn)的“MedGPT”能力為龍崗社康患者提供高效便捷的初步診斷導(dǎo)診服務(wù)，患者僅需通過語音或文字輸入癥狀描述，系統(tǒng)即可迅速分析，智能匹配可能的疾病類別與科室建議。該系統(tǒng)不僅具備強(qiáng)大的病例庫與醫(yī)學(xué)知識(shí)圖譜支持，還能根據(jù)患者的年齡、性別、病史等個(gè)性化信息，提供更加精準(zhǔn)的就診指引。同時(shí)，AI智能導(dǎo)診還能提供醫(yī)院信息、社康信息、專家介紹及預(yù)約掛號(hào)等一站式服務(wù)，有效縮短患者就醫(yī)等待時(shí)間，提升就醫(yī)體驗(yàn)。無論是日常小病咨詢還是緊急狀況應(yīng)對(duì)，都能為患者提供及時(shí)有效的幫助。此外，未來全科醫(yī)生智能體為患者提供健康咨詢服務(wù)，通過“MedGPT”的技術(shù)能力對(duì)患者進(jìn)行個(gè)性化的健康指導(dǎo)。系統(tǒng)能夠根據(jù)患者的體檢結(jié)果和健康狀況，提供針對(duì)性的飲食建議、運(yùn)動(dòng)建議、疾病預(yù)防建議等，幫助患者改善生活習(xí)慣，提升健康水平。同時(shí)，系統(tǒng)支持在線咨詢和留言咨詢功能，方便患者隨時(shí)向醫(yī)生或健康專家咨詢問題。在龍崗區(qū)的社區(qū)健康服務(wù)體系中，基于MedGPT的未來全科醫(yī)生智能體已延伸至全崗位、全環(huán)節(jié)和全要素。智能體能夠橫向覆蓋全人群、全項(xiàng)目（基本醫(yī)療和基本公衛(wèi)）；縱向聚焦全生命周期（從出生到死亡）、全服務(wù)流程（診前、診中、診后）、全鏈條（疾病管理到健康管理），擴(kuò)展延伸至全崗位（11個(gè)工作崗位）、全環(huán)節(jié)（服務(wù)到管理）、全要素（人財(cái)物），輸出到全路徑（居民端、醫(yī)生端、管理端），上中下聯(lián)通，左右協(xié)同，前后聯(lián)動(dòng)，首尾呼應(yīng)。這種全方位、立體化的服務(wù)模式，極大地提升了醫(yī)療服務(wù)的整體效能，為居民帶來了更加便捷、高效和優(yōu)質(zhì)的健康體驗(yàn)。未來全科醫(yī)生智能體在龍崗區(qū)社區(qū)健康服務(wù)融合式服務(wù)清單的實(shí)踐與探索中發(fā)揮了重要作用。龍崗區(qū)作為國內(nèi)首次提出“清單式管理”的社區(qū)健康服務(wù)中心主管機(jī)關(guān)，一直致力于通過精細(xì)化管理提升服務(wù)質(zhì)量和效率。未來全科醫(yī)生智能體的引入，不僅豐富了清單式管理的內(nèi)涵，還實(shí)現(xiàn)了清單管理與人工智能技術(shù)的深度融合。隨著技術(shù)的不斷進(jìn)步和應(yīng)用場景的不斷拓展，智能體將能夠?yàn)榫用裉峁└觽€(gè)性化、精準(zhǔn)化的健康管理服務(wù)。同時(shí)，智能體還將與其他醫(yī)療技術(shù)和手段相結(jié)合，如遠(yuǎn)程醫(yī)療、智能穿戴設(shè)備等，共同推動(dòng)龍崗區(qū)社區(qū)健康服務(wù)的智能化升級(jí)和高質(zhì)量發(fā)展。未來全科醫(yī)生智能體的落地實(shí)施，不僅是對(duì)傳統(tǒng)醫(yī)療服務(wù)模式的革新，更是對(duì)未來醫(yī)療創(chuàng)新的一次大膽嘗試。這一創(chuàng)舉不僅為龍崗區(qū)居民帶來了更加便捷、高效的醫(yī)療服務(wù)，更為全國范圍內(nèi)的社區(qū)健康服務(wù)提供了可借鑒的寶貴經(jīng)驗(yàn)。

2025/01/09

【病案分享】未來醫(yī)生在肺炎支原體感染診療中的應(yīng)用實(shí)踐

肺炎支原體感染在兒童及青少年呼吸道感染疾病中占據(jù)重要地位，其發(fā)病率呈逐年上升趨勢(shì)，給臨床診療帶來諸多挑戰(zhàn)。在當(dāng)今快速發(fā)展的醫(yī)療領(lǐng)域，人工智能（AI）正以其獨(dú)特的技術(shù)優(yōu)勢(shì)，漸漸影響著傳統(tǒng)醫(yī)療模式。本文將結(jié)合一位5歲患兒的問診案例，深入剖析肺炎支原體感染的疾病背景、診療難點(diǎn)與易混淆點(diǎn)，并闡述未來醫(yī)生在該病例中的應(yīng)用價(jià)值。肺炎支原體（Mycoplasma pneumoniae）是一種介于細(xì)菌和病毒之間的微生物，主要通過呼吸道飛沫傳播，可引起上呼吸道感染、支氣管炎、肺炎等一系列呼吸道疾病。肺炎支原體感染全年均可發(fā)病，但以秋冬季多見。在兒童群體中，由于其免疫系統(tǒng)尚未完全成熟，更容易受到肺炎支原體的侵襲。據(jù)相關(guān)研究統(tǒng)計(jì)，肺炎支原體感染在兒童社區(qū)獲得性肺炎中占比可達(dá)10% - 40%。肺炎支原體感染的診療難點(diǎn)一、診斷難點(diǎn)1、癥狀非特異性肺炎支原體感染的臨床表現(xiàn)多樣，初期癥狀常與普通感冒相似，如咳嗽、發(fā)熱、咽痛等，缺乏特異性癥狀，難以僅憑臨床表現(xiàn)進(jìn)行準(zhǔn)確診斷。這就要求臨床醫(yī)生綜合考慮患者的流行病學(xué)史、癥狀演變過程等多方面因素進(jìn)行判斷。2、實(shí)驗(yàn)室檢查的局限性（1）肺炎支原體抗體檢測：雖然血清學(xué)檢測肺炎支原體抗體是常用的診斷方法，但抗體產(chǎn)生存在窗口期。在感染早期，抗體可能尚未達(dá)到可檢測水平，容易造成漏診。而且，IgM 抗體在體內(nèi)可持續(xù)存在數(shù)月，可能導(dǎo)致對(duì)既往感染和現(xiàn)癥感染的判斷失誤。（2）其他檢測方法：如核酸檢測雖然具有較高的靈敏度和特異性，但對(duì)檢測設(shè)備和技術(shù)要求較高，基層醫(yī)療機(jī)構(gòu)難以廣泛開展。培養(yǎng)法雖然是診斷的 “金標(biāo)準(zhǔn)”，但肺炎支原體培養(yǎng)時(shí)間長，陽性率低，臨床應(yīng)用受限。（二）治療難點(diǎn)1、抗生素選擇肺炎支原體無細(xì)胞壁，因此對(duì)β-內(nèi)酰胺類抗生素天然耐藥。大環(huán)內(nèi)酯類抗生素曾是治療肺炎支原體感染的首選藥物。但隨著近年來大環(huán)內(nèi)酯類抗生素的廣泛應(yīng)用，肺炎支原體對(duì)其耐藥率逐漸上升。據(jù)報(bào)道，部分地區(qū)肺炎支原體對(duì)阿奇霉素的耐藥率已超過10%，這給臨床治療帶來了極大的困擾，迫使醫(yī)生在治療時(shí)需謹(jǐn)慎考慮抗生素的選擇和療效評(píng)估。2、病情評(píng)估與療程確定炎支原體感染后，病情輕重不一，部分患者可自愈，而部分患者可能發(fā)展為重癥肺炎，甚至合并肺外并發(fā)癥，如心肌炎、腦膜炎等。準(zhǔn)確評(píng)估患者病情嚴(yán)重程度并確定合理的治療療程是臨床治療的關(guān)鍵，但由于缺乏明確的指標(biāo)和統(tǒng)一的標(biāo)準(zhǔn)，這在實(shí)際操作中具有一定難度。（三）易混淆點(diǎn)肺炎支原體感染與其他呼吸道病原體感染在癥狀上有諸多相似之處，如流感病毒、呼吸道合胞病毒等感染也可引起發(fā)熱、咳嗽等癥狀。在臨床上，需要仔細(xì)鑒別診斷，避免誤診誤治。例如，流感病毒感染起病急驟，高熱、全身癥狀明顯，而肺炎支原體感染相對(duì)隱匿，發(fā)熱多為中低熱，咳嗽癥狀較為突出且可持續(xù)較長時(shí)間。未來醫(yī)生助力肺炎支原體感染診療（一）病案回顧在本次案例中，一名5歲男性兒童因咳嗽、發(fā)熱前來就診。經(jīng)檢查，肺炎支原體抗體滴度為 1:160+，超出正常參考范圍，提示肺炎支原體感染。（二）未來醫(yī)生的診療思路與輔助決策1、全面的診斷分析未來醫(yī)生首先對(duì)患兒的癥狀和檢查結(jié)果進(jìn)行了綜合分析，考慮到肺炎支原體感染的可能性較大，但并未局限于此。它進(jìn)一步建議進(jìn)行胸部 X光、血常規(guī)、痰培養(yǎng)等檢查，以全面評(píng)估患兒的病情，排除其他病原體感染或合并癥的可能。這種全面性的診斷思路有助于提高診斷的準(zhǔn)確性，避免漏診和誤診。2、精準(zhǔn)的治療方案推薦針對(duì)肺炎支原體感染，未來醫(yī)生依據(jù)新版指南推薦，在考慮到大環(huán)內(nèi)酯類抗生素耐藥率上升的情況下，合理建議首選阿奇霉素或紅霉素進(jìn)行抗生素治療，并詳細(xì)給出了用藥劑量和療程的參考范圍。同時(shí)，還提出了對(duì)癥治療和支持治療的具體措施，如使用退熱藥控制體溫、止咳藥緩解咳嗽癥狀以及保證患兒充足休息、多喝水、保持室內(nèi)空氣流通等。這體現(xiàn)了 未來醫(yī)生在治療方案推薦上的精準(zhǔn)性和綜合性，能夠?yàn)榕R床醫(yī)生提供系統(tǒng)的治療思路。3、智能的隨訪與監(jiān)測規(guī)劃未來醫(yī)生深知肺炎支原體感染治療過程中隨訪監(jiān)測的重要性，為患兒制定了定期復(fù)診的計(jì)劃，明確了監(jiān)測病情變化和治療效果的關(guān)鍵指標(biāo)，如體溫、咳嗽癥狀改善情況、復(fù)查肺炎支原體抗體滴度等。通過智能的隨訪與監(jiān)測規(guī)劃，有助于醫(yī)生及時(shí)發(fā)現(xiàn)治療過程中的問題，及時(shí)調(diào)整治療方案，提高治療成功率。（三）與傳統(tǒng)診療模式對(duì)比在傳統(tǒng)診療模式下，醫(yī)生主要依靠自身經(jīng)驗(yàn)和有限的實(shí)驗(yàn)室檢查結(jié)果進(jìn)行診斷和治療決策。面對(duì)肺炎支原體感染這種復(fù)雜的疾病，可能會(huì)因個(gè)人經(jīng)驗(yàn)差異導(dǎo)致診斷不全面、治療方案選擇不當(dāng)或療程確定不合理等問題。而未來醫(yī)生借助海量的醫(yī)學(xué)數(shù)據(jù)和先進(jìn)的人工智能算法，能夠快速、全面地分析病情，為醫(yī)生前置提供標(biāo)準(zhǔn)化、個(gè)性化的診療建議，大大提高了診療效率和質(zhì)量，減少了因人為因素導(dǎo)致的診療誤差。結(jié)論肺炎支原體感染的診療面臨著諸多挑戰(zhàn)，從疾病的診斷難點(diǎn)、治療難點(diǎn)到與其他呼吸道疾病的易混淆點(diǎn)，都需要臨床醫(yī)生具備豐富的經(jīng)驗(yàn)和精準(zhǔn)的判斷能力。未來醫(yī)生在肺炎支原體感染的診療過程中展現(xiàn)出了卓越的能力，通過全面的診斷分析、精準(zhǔn)的治療方案推薦和智能的隨訪監(jiān)測規(guī)劃，為醫(yī)生提供了有力的輔助支持，有助于提高診療水平，改善患者預(yù)后。在未來的醫(yī)療實(shí)踐中，未來醫(yī)生有望成為醫(yī)生們不可或缺的智能助手，共同推動(dòng)醫(yī)療行業(yè)朝著更加精準(zhǔn)、高效、智能的方向發(fā)展。

2025/01/20