北理工團隊在眼底醫(yī)學圖像處理領域取得新進展
發(fā)布日期：2022-02-10 供稿：光電學院
編輯：盛筠 審核：董立泉 閱讀次數(shù)：
近日，北京理工大學光電學院許廷發(fā)科研團隊在眼底醫(yī)學圖像處理領域取得新突破，相關研究成果以“RTNet: Relation Transformer Network for Diabetic Retinopathy Multi-lesion Segmentation”為題發(fā)表在醫(yī)學圖像處理領域的國際頂級期刊《IEEE Transactions on Medical Imaging（IEEE TMI）》(IF="10.332)上。IEEE" TMI是醫(yī)學圖像處理領域具有高影響力的國際學術(shù)刊物之一，在2021年該領域270余種JCR期刊中排名前列，影響因子為10.332，中科院一區(qū)，主要發(fā)表和報道醫(yī)學圖像處理和分析、可視化和性能等領域的最新研究進展。該工作第一作者為北京理工大學博士研究生黃詩淇，通訊作者為北京理工大學許廷發(fā)和李佳男。
糖尿病視網(wǎng)膜病變，作為糖尿病的一種衍生眼部疾病，已經(jīng)成為全球工作年齡人口致盲最主要的致盲原因。據(jù)國際糖尿病聯(lián)合會（IDF）發(fā)布，我國糖尿病患者總數(shù)將在2030年增加到1.64億，這其中超過30%的人會產(chǎn)生視網(wǎng)膜病變，若未能及時發(fā)現(xiàn)和干預，將發(fā)生不可逆轉(zhuǎn)的視覺損害。
在近幾年，國內(nèi)外學者嘗試通過訓練有素的人工智能來分割眼底影像中糖尿病病變的關鍵病灶。然而，病灶圖案的小尺寸和易混淆的眼底復雜結(jié)構(gòu)經(jīng)常使得人工智能模型經(jīng)常錯分病灶。許廷發(fā)教授團隊首次引入血管信息作為先驗知識來解決這一科學難題，提出了一個端到端的基于transformer結(jié)構(gòu)的多病灶分割網(wǎng)絡RTNet。針對血管異常總是產(chǎn)生病灶的直接或間接原因，將病灶特征和血管信息分別作為transformer結(jié)構(gòu)的查詢值和關鍵值輸入，使得病灶像素的決定血管的分布情況。此外，針對多目標分割問題的難題，該團隊研究發(fā)現(xiàn)不同病灶的出現(xiàn)和分布符合疾病發(fā)展的規(guī)律，從這一病理規(guī)律出發(fā)提出了一個全新的綜合全局和細節(jié)信息的自注意結(jié)構(gòu)，實現(xiàn)了從多目標同時提取病灶特征。
圖1 糖尿病視網(wǎng)膜病變多病灶分割模型
該項研究開創(chuàng)性地引入血管信息作為先驗知識輔助眼底病灶的分割，同時也是第一個將多頭transformer結(jié)構(gòu)應用到眼底影像病灶分割中。在多個具有挑戰(zhàn)性的眼底影像數(shù)據(jù)集上，與最先進的、高度優(yōu)化的分割算法相比，RTNet都表現(xiàn)出明顯的性能優(yōu)勢，通過在基準評價指標上的定性定量分析，證明了RTNet各組分結(jié)構(gòu)的有效性。此研究有助于更加清晰深刻地理解糖尿病視網(wǎng)膜病灶之間的內(nèi)在關系，對糖尿病的視網(wǎng)膜病變的處理和分析具有重要意義。
論文詳情：S. Huang, J. Li, Y. Xiao, N. Shen and T. Xu, "RTNet: Relation Transformer Network for Diabetic Retinopathy Multi-lesion Segmentation," in IEEE Transactions on Medical Imaging, doi: 10.1109/TMI.2022.3143833.
論文鏈接：https://ieeexplore.ieee.org/abstract/document/9684442
附作者簡介：
黃詩淇，北京理工大學光電學院2021級博士生，師從許廷發(fā)教授，研究方向是光學成像和醫(yī)學圖像處理。現(xiàn)已發(fā)表學術(shù)論文5篇，其中第一作者4篇，包括IEEE Trans on Medical Imaging、Optics Express,、Physica E等高水平期刊，申請中國發(fā)明專利1項。曾獲中國大學生物理學術(shù)競賽二等獎、北京市優(yōu)秀畢業(yè)生等榮譽。
李佳男，博士，北京理工大學光電學院預聘助理教授，新加坡國立大學博士后。研究方向為光電成像探測與識別、計算機視覺、嵌入式視頻處理等。近五年發(fā)表高水平學術(shù)論文30篇，其中第一作者論文包括 IEEE TPAMI、TVCG、CVPR、ICLR等頂級期刊會議9篇，ESI高被引論文1篇。論文單篇最高被引600余次，谷歌學術(shù)總引用2400余次。主持國自然青年科學基金項目、博士后科學基金一等面上項目和項3項；參與國家自然科學基金重大科研儀器研制項目等5項。入選北京市科協(xié)青年人才托舉工程，曾獲得中國圖象圖形學學會優(yōu)秀博士學位論文、王大珩高校學生光學獎等榮譽，獲得ImageNet大規(guī)模視覺識別挑戰(zhàn)賽（ILSVRC-2017）目標定位任務冠軍。指導團隊獲得ICCV 2021“無人機跟蹤”挑戰(zhàn)賽冠軍及最佳論文獎。
許廷發(fā)，教授，博導，國家一級重點學科“光學工程”責任教授，光電成像技術(shù)與系統(tǒng)教育部重點實驗室副主任。近年來帶領其科研團隊圍繞光電成像探測與識別、計算成像和醫(yī)學光電成像等方向不斷深化研究。主持承擔國家自然科學基金委重大科研儀器研制項目等30多項。在國際、國內(nèi)等系列期刊發(fā)表學術(shù)論文135余篇，其中被SCI/EI收錄90余篇。以第一發(fā)明人申請國家發(fā)明專利40項，已授權(quán)和公示15項。指導的研究生獲得中國圖象圖形學學會優(yōu)博、全國王大珩光學獎、全國創(chuàng)新創(chuàng)業(yè)大賽一等獎和北京理工大學優(yōu)博。科研團隊入選2020年度重慶英才創(chuàng)新創(chuàng)業(yè)示范團隊和獲得ICCV 2021“無人機跟蹤”挑戰(zhàn)賽冠軍及最佳論文獎。
分享到：