全球每年2000萬新增癌癥患者中,僅1%能獲得多學科膽瘤委員會的精準診療。微軟醫療智能體協調器現可通過Microsoft Azure Al Foundry(國際版)智能體目錄獲取,它將影像、病理、基因組數據與電子健康記錄整合,通過多智能體協同編排功能將癌癥決策流程從數小時壓縮至分鐘級,并能夠直接嵌入Microsoft Teams、Microsoft Worcd等工具,賦能開發者加速臨床醫療創新進程。
每年,全球約有2000萬新增癌癥確診病例[1]。每位患者的腫瘤特征都具有獨特性,數百種不同的亞型意味著需要量身定制包含新藥聯用、臨床試驗和設備治療在內的綜合方案。為應對這一挑戰,國際頂級癌癥中心普遍采用多學科腫瘤委員會模式:由放射科、病理科、外科、腫瘤內科、遺傳咨詢等領域的專家組成核心團隊,通過系統性分析海量臨床數據與前沿醫學知識,為患者制定精準的個體化治療方案。
然而,由于前期準備復雜且專業門檻極高,目前僅有不足1%的患者能受益于這種已被臨床驗證能顯著改善預后的個性化診療服務。
美國臨床腫瘤學會(ASCO)最新研究顯示,臨床醫生平均需為每位患者耗費1.5-2.5小時,對影像學資料、病理切片、基因組數據和病程記錄進行交叉驗證與分析[2]。這反映出癌癥診療僅是醫療領域復雜數據處理的冰山一角,而智能體AI的出現,正為突破行政效率瓶頸、重塑醫療服務范式提供全新可能。
醫療智能體協調器現已可通過 Microsoft Azure AI Foundry (國際版) 的智能體目錄獲取。它具備預配置的智能體、多智能體協同編排功能以及開源定制選項,允許開發者和研究人員構建智能體,來協調例如腫瘤委員會這種多學科、多模態的醫療健康數據工作流,并簡化其向例如 Microsoft Teams 和 Word 等醫療健康企業生產力工具的部署。模塊化通用推理引擎與專業化多模態 AI 智能體的協同運作,可高效完成傳統需耗費數小時的人工診療任務,其核心目標在于借助高度定制化的前沿智能體 AI 技術,為臨床專科醫生提供精準的能力賦能與決策支持。
通過整合微軟最新技術能力,醫療智能體協調器能夠管理和分析多種類型的醫療健康數據,涵蓋影像(DICOM 文件)、病理(全切片圖像)、基因組學數據以及來自電子健康記錄(EHR)的臨床記錄。每個智能體都配備了來自 Microsoft Azure AI Foundry (國際版) 的先進 AI 技術模型,通過有機融合通用推理引擎與專業醫療模態模型,實現對多維度臨床數據的深度挖掘與轉化,最終輸出具有直接臨床指導價值的決策洞見。
01醫療智能體協調器的關鍵功能
?協調具備復雜 HER 數據推理能力的智能體功能,輔助臨床醫生完成耗時的任務,包括:構建按時間順序排列的患者時間線、確定癌癥分期、使用特定的參考指南、審閱放射學和病理學圖像、整合當前醫學文獻、參考治療指南、篩選相關臨床試驗以及生成定制化報告。
?提供通過 Microsoft Fabric (國際版)和快速醫療健康互操作性資源(FHIR)數據服務,連接企業醫療健康數據的工具。
?支持開發者使用自己的模型、工具、指令和數據源創建、定制和微調每個智能體;在引導式體驗環境中測試性能;并可以通過設置使用 Microsoft Copilot Studio 來擴展智能體,將模型上下文協議(MCP)服務器與提供的示例實現集成。
?確保與現有醫療工作流的無縫集成,包括分發至大多數醫療健康組織已在使用的熟悉工具,例如 Microsoft Teams、Word、PowerPoint 和智能 Microsoft 365 Copilot 副駕駛等,用戶可以在這些工具中與 AI 智能體交互。
?在智能體 AI 生成的輸出中,提供強大的可解釋性功能,例如將響應錨定至原始EHR數據源,這對于在高風險醫療環境中獲得驗證、信任和采用至關重要。
包括斯坦福大學、約翰霍普金斯大學、Providence Genomics、麻省總院布列根醫院、威斯康星大學麥迪遜分校醫學與公共衛生學院在內的領先癌癥診療機構的研究人員和開發者,目前正在探索醫療智能體協調器,研究 AI 智能體如何為癌癥診療等復雜臨床任務創造價值。
“斯坦福醫學院每年為4000例癌癥患者提供多學科診療服務。目前,我們的臨床團隊已在腫瘤委員會會議中采用基于 Microsoft Azure 平臺(國際版)、符合患者隱私保護規范的 GPT 實例生成臨床摘要。新型醫療智能體協調器將顯著優化現有工作流程:通過消除數據復制粘貼等碎片化操作來提升效率,更可深度挖掘傳統檢索困難的關鍵臨床數據價值,包括但不限于臨床試驗入組標準、循證治療指南及真實世界證據等維度。斯坦福醫療保健體系正積極推進該協調器的臨床應用研究,致力于打造全球首個投入實際癌癥診療場景的生成式 AI 智能體解決方案。”——邁克·普法伊弗博士,斯坦福醫療保健和斯坦福大學醫學院首席信息官
“醫療智能體協調器的愿景是,實現復雜癌癥病例的多模態醫療信息快速篩選與智能匯總,將原本需要數小時的專業審閱過程優化至幾分鐘內完成。這一創新技術讓我們通過與微軟的合作,得以深入探索其在腫瘤委員會等多場景中的臨床應用價值。”——約書亞·華納博士,威斯康星大學衛生系統放射科醫生,威斯康星大學麥迪遜分校醫學與公共衛生學院放射學助理教授
在早期開發階段,研究團隊成功將多智能體工作流整合至 Microsoft Teams 聊天中。例如,通過群組對話功能,醫療專家可與接入專業醫療數據庫的 AI 智能體進行實時交互。實踐表明,這種集成方案能有效提升醫療團隊的工作效率與協作水平。
目前,臨床醫生與開發人員正基于此技術架構共同研發新一代醫療智能體應用,其技術核心在于將基于通用推理模型和多模態醫療基礎模型開發的專用智能體,與 Microsoft Teams 平臺的無縫交互能力進行有機結合。
例如,約翰霍普金斯大學的腫瘤學家瓦桑·耶格納蘇布拉馬尼安(Vasan Yegnasubramanian)博士、埃爾莎·安娜格諾斯托(Elsa Anagnostou)博士和塔克西阿奇斯·博特西斯(Taxiarchis Botsis)博士,以及他們在約翰霍普金斯 inHealth 精準醫療項目和分子腫瘤委員會的開發團隊,正在貢獻他們的專業知識,以完善和測試該系統,確保其在他們的臨床和精準醫療應用場景中具有高度實用性。
02協調專業智能體的協作
醫療智能體協調器基于微軟研究院與合作伙伴的前沿研究成果構建,專門用于協調為癌癥診療等跨學科復雜臨床工作流程量身定制的專業智能體系統。
協調器利用 Semantic Kernel 和 Magentic-One 來協調智能體、維護共享記憶并在人機協同工作流中發揮作用。
患者歷史智能體利用 Universal Medical Abstraction 按時間線組織患者數據[3]。原本需要專家花費三個多小時的手動工作,幾分鐘內即可完成。
放射學智能體利用客戶微調模型(如 CXRRepotGen/MAIRA-2)來分析放射影像,進行二次判讀[4]。
病理學智能體演示如何連接到外部智能體,如 Paige.ai 的 Alba 病理智能體,以處理與病理圖像相關的復雜查詢(預覽版可用)[5]。
癌癥分期智能體參考美國癌癥聯合委員會(AJCC)臨床指南,來支持準確的癌癥分期。
臨床指南智能體參考美國國家綜合癌癥網絡(NCCN)臨床指南以建議推薦的治療方案。
臨床試驗智能體通過將患者檔案與 ClinicalTrials.gov 等數據庫進行匹配,來識別符合條件的臨床試驗。與公開的 Critera2Query 基線相比,其召回率提升可超過一倍[6]。
醫學研究智能體基于可信醫學期刊的知識圖譜,提供可操作的循證指導。
報告創建智能體自動化生成全面、集成、格式豐富的報告,作為多學科會議期間的可信參考。
“在推進多智能體系統臨床常規化應用的進程中,醫療智能體協調器展現了卓越的系統集成能力,它能將各類 AI 技術模型和智能體無縫對接至臨床醫生日常使用的生產力工具。這一靈活的智能體協同編排框架,使 Paige 團隊得以持續深耕病理智能體的研發,同時確保我們的解決方案能夠融入到整體癌癥診療流程中,并充分發揮多模態醫療數據的協同價值。”——拉齊克·尤斯菲,Paige.ai 首席執行官
醫療智能體協調器采用開放式架構設計,包括第三方解決方案在內的任何通過認證的智能體,只需提供 API 接口、工具封裝或 MCP 協議端點,即可無縫接入 Microsoft Teams 的會話流程。作為首個成功對接的第三方智能體,Paige.ai 正式推出了 Alba 智能體預覽版。
這種解決方案深度融合了 Paige 自主研發的基礎視覺大模型與對話式 LLM 交互界面,能夠基于全切片數字病理圖像,實時輸出包括腫瘤分級、組織形態學特征及生物標志物狀態等關鍵指標的智能化病理分析結果。
“Providence 臨床研究團隊已經開始運用醫療智能體協調器提供的先進 AI 技術能力,這讓我們能夠快速高效地分析大量醫學文獻、臨床試驗和電子健康記錄。我們特別看好這項技術在分子腫瘤委員會中的應用前景,它不僅能提升我們解讀基因組學數據和匹配臨床試驗的能力,更重要的是能為患者提供更精準、更及時的治療選擇。
這個系統與現有工作流程的整合,還將顯著改善臨床團隊之間的溝通效率,確保重要醫療信息得到及時準確的共享。在我們持續探索癌癥生物學機制的過程中,這項技術必將成為推動醫學發現和提升癌癥治療效果的關鍵助力。”——拉齊克·尤斯菲,Paige.ai 首席執行官
03賦能開發者,加速臨床醫療
創新進程
隨著臨床診療復雜度的提升,醫療智能體協調器將持續為開發者提供關鍵支持,使其能夠從容應對智能體 AI 技術的快速發展浪潮。平臺致力于搭建臨床醫生與開發者之間的協作橋梁,通過將先進能力整合至現有醫療工作流,推動精準醫療技術的大規模臨床應用。
該框架最初著眼于探索腫瘤委員會輔助場景的創新機遇,其長遠發展愿景是全方位賦能醫療健康與生命科學領域的開發者群體,通過為整個醫療生態系統中的多學科診療團隊提供實時智能化支持,研究智能體 AI 技術對臨床醫生工作模式和患者診療體驗的深遠影響。
我們誠摯邀請醫療健康領域的開發者和臨床機構,通過Microsoft Azure AI Foundry(國際版)智能體目錄來應用醫療智能體協調器,共同探索新一代 AI 技術賦能的醫療健康智能體解決方案,攜手開創智能醫療的新未來。
-
微軟
+關注
關注
4文章
6679瀏覽量
105568 -
醫療
+關注
關注
8文章
1896瀏覽量
59759 -
智能體
+關注
關注
1文章
291瀏覽量
11024
原文標題:全球僅1%癌癥患者可獲得精準診療?看醫療智能體如何打破困局
文章出處:【微信號:mstech2014,微信公眾號:微軟科技】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
涂鴉智能重磅發布四大AIoT技術引擎,賦能開發者以AI重構物理世界

涂鴉智能重磅發布四大AIoT技術引擎,賦能開發者以AI重構物理世界

Apex平臺:簡化AI API開發,賦能開發者
HarmonyOS 應用開發賦能套件:鴻蒙原生應用開發的 “神助攻”
AI開發平臺如何賦能開發者
《HarmonyOS第一課》煥新升級,賦能開發者快速掌握鴻蒙應用開發
NVIDIA助力西門子醫療加速醫學影像AI部署
美格智能亮相2024邊緣智能開發者生態大會,攜手邁向邊緣智算新時代

從芯片到系統賦能創新:2024新思科技開發者大會共創萬物智能未來

GE醫療與亞馬遜云科技達成戰略合作,通過生成式AI加速醫療健康領域轉型
XREAL Air 2 ULTRA開售,NRSDK開放能力 賦能開發者實現全功能AR訴求

評論