腦區(qū)分割是醫(yī)學圖像處理的主要任務(wù)，對神經(jīng)科學研究和臨床診斷都有著深遠的影響。精確的腦區(qū)分割對于分析不同的腦區(qū)至關(guān)重要，因為它們的體積、表面積和形態(tài)與各種神經(jīng)系統(tǒng)疾病有關(guān)，比如帕金森病和阿爾茨海默病等。PET/MR成像系統(tǒng)則是一種有效的腦部疾病診斷工具，它結(jié)合了PET代謝成像和MR結(jié)構(gòu)成像的優(yōu)點，可以在疾病早期觀察到特定大腦區(qū)域的代謝異常和結(jié)構(gòu)變化，從而將功能和代謝雙模態(tài)信息相結(jié)合用于腦疾病診斷。
然而，人工分割腦區(qū)圖像費時費力，且分割結(jié)果容易受到個體差異和操作人員主觀因素的影響。因此，急需引入自動分割技術(shù)來解決分割中高成本和長耗時的問題，促進基于醫(yī)學影像的腦科學研究。
2025年3月，醫(yī)學成像科學與技術(shù)系統(tǒng)全國重點實驗室、中國科學院深圳先進技術(shù)研究院醫(yī)學人工智能研究中心胡戰(zhàn)利研究員團隊，開發(fā)了一種基于交叉融合機制的PET/MR雙模態(tài)全腦區(qū)自動分割技術(shù)，該方法在分割過程中高效整合PET與MR的功能和結(jié)構(gòu)信息，實現(xiàn)了更精確、更全面的腦區(qū)分割。研究成果以“Automatic Brain Segmentation for PET/MR Dual-modal Images through a Cross-Fusion Mechanism”為題，發(fā)表在醫(yī)學成像領(lǐng)域TOP期刊IEEE Journal of Biomedical and Health Informatics上，論文同時被選為期刊2025年3月的“封面文章”。提出方法創(chuàng)新性地引入交叉融合機制，充分利用PET和MR的互補特性來實現(xiàn)腦區(qū)自動分割，為醫(yī)學影像分析和神經(jīng)系統(tǒng)疾病的診斷提供了全新思路。
隨著人工智能技術(shù)的迅速發(fā)展，深度學習以其強大的特征表達能力活躍在計算機視覺的各個領(lǐng)域，也大量地被應(yīng)用于醫(yī)學圖像領(lǐng)域。深度學習方法通過對大量數(shù)據(jù)進行學習，訓練深層學習網(wǎng)絡(luò)，可以實現(xiàn)端到端的輸出，具有廣泛的應(yīng)用前景。然而，現(xiàn)有基于深度學習的方法在PET/MR腦區(qū)分割任務(wù)中仍存在一定局限性。單模態(tài)方法僅依賴單一信息源，難以提供完整的腦部結(jié)構(gòu)信息，而現(xiàn)有的雙模態(tài)方法大多只是將PET與MR數(shù)據(jù)簡單拼接，缺乏深度融合，未能充分利用兩種模態(tài)的優(yōu)勢。因此，如何有效結(jié)合PET和MR信息，提高腦區(qū)自動分割的精度和魯棒性成為了研究人員關(guān)注的重點。
研究團隊提出了一種基于交叉融合機制的全腦區(qū)自動分割方法，通過融合功能和結(jié)構(gòu)信息以提高腦區(qū)分割的準確性。該網(wǎng)絡(luò)同時處理PET和MR圖像，在編碼部分，首先采用UX-Net進行特征提取，然后利用基于交叉注意力機制的融合模塊進行結(jié)構(gòu)和功能特征融合，以增強分割網(wǎng)絡(luò)對多模態(tài)信息的適應(yīng)性，提高分割效果。
實驗從視覺、定量、臨床、額外數(shù)據(jù)驗證以及消融實驗五個方面展示分割結(jié)果，以驗證模型的有效性。實驗結(jié)果表明，所提出方法實現(xiàn)了精確的全腦區(qū)分割，有利于腦部疾病的臨床診斷和分析。該方法對其它多模態(tài)融合分割任務(wù)表現(xiàn)出良好的通用性和適用性，未來也可將該方法應(yīng)用于分割其它多模態(tài)或組織和器官的任務(wù)中。
中國科學院深圳先進技術(shù)研究院胡戰(zhàn)利研究員、河南省人民醫(yī)院王梅云副院長為論文共同通訊作者，中國科學院深圳先進技術(shù)研究院碩士生唐紅艷、副研究員黃振興和博士生李文博為論文共同第一作者。該研究得到了國家自然科學基金（數(shù)學天元重點專項）、國家重點研發(fā)計劃（重大科學儀器設(shè)備研發(fā)重點專項）、廣東省自然科學基金（卓越青年團隊項目）和深圳醫(yī)學科學院（原創(chuàng)探索項目）等項目的資助。
圖1：論文被選為IEEE JBHI期刊2025年3月封面文章
圖2：提出方法的總體技術(shù)路線圖
圖3：提出方法與現(xiàn)有分割方法效果對比
圖4：不同方法分割結(jié)果的SUV相關(guān)性評估
附件下載：