科大開發人工智能醫療診斷
【本報消息】澳門科技大學醫學院副院長張康講座教授聯同四川大學華西醫院、香港大學,以及珠海市人民醫院等機構的研究人員組成研究團隊在知名學術期刊《自然生物醫學工程》(Nature Biomedical Engineering)發表文章,並率先提出一個基於人工智能的多模態融合肺部影像醫療診斷模型。
在醫學臨床實踐中,醫生通常需要綜合考慮多種不同模態的醫學信息作出診斷,比如病人病歷、血液檢查、影像報告等。這種綜合分析能力需要醫生有豐厚的醫學專業知識和長期臨床實踐經驗,但在現有醫療環境中,專業醫生數量遠不能滿足病人日益增長的醫療健康需求。目前人工智能技術飛速發展,如果能利用人工智能獲得這種綜合分析的能力從而輔助醫生診斷,將極大提高醫療效率和緩解醫療資源短缺的問題。
基於人工智能的醫學圖像診斷近年來取得很大進展,電腦能從單純醫學圖像中識別出病灶區域、或者作出初步診斷。但如何讓計算機將醫學圖像及其相關的臨床信息綜合起來解讀,仍是一個較大的難題。
為解決上述關鍵問題,張康和合作團隊開發了一個統一的基於人工智能的醫療診斷模型,IRENE。
該模型包含統一數據輸入處理模塊和雙向跨模態注意力機制塊,通過共同學習不同信息間的整體特徵和其關聯性來作出決策。該模型有效整合醫學圖像、非結構化的病歷信息和實驗室檢測數據,運用統一的跨模態分析流程,實現綜合處理不同數據,做出融會貫通、更為準確的判斷。有關研究論文,可瀏覽(www.nature.com/articles/s41551-023-
01045-x)。