图像修复

Parent: ai_keywords

核心定义

图像修复(Image Inpainting)是指利用算法对图像中缺失、损坏或遮挡区域进行语义一致、纹理连续的重建技术。在AI+医学神经科学领域,该技术不仅需恢复像素,更要确保重建区域符合解剖结构与病理生理逻辑,避免引入伪影或误判。

关键技术点

  1. 生成对抗网络(GAN)
    通过生成器与判别器的博弈学习,生成高真实感修复结果。医学应用中常用条件GAN(如Pix2Pix)约束输出与上下文解剖结构的匹配度。
  2. 注意力机制与Transformer
    自注意力可捕获长程空间依赖,修复大面积缺失时保持全局结构连贯。如Swin-Transformer用于脑MRI血管造影的孔洞填补。
  3. 多尺度特征融合
    结合低层边缘细节与高层语义特征,平衡修复区域的锐利度与平滑性。U-Net变体(如Partial Conv)在医学切面修复中表现突出。
  4. 扩散模型
    近年发展出基于噪声迭代去噪的修复范式(如Repaint),逐步还原高保真解剖细节,尤其适合低对比度神经影像(如T2-FLAIR)。
  5. 小样本与域适应
    医学数据稀缺,需利用预训练模型(如Med3D)进行权重迁移,或通过域适应缓解不同MRI采集设备间的风格差异。

医学/神经科学应用场景

脑卒中MRI梗死区域虚拟正常化
结合首都医科大学神经病学团队研究:急性缺血性卒中患者FLAIR像上常出现高信号梗死核心区。利用GAN修复模型,输入病灶区域掩码,以对侧镜像健康组织及扩散加权像(DWI)中的明度信息为条件,生成“虚拟正常”的FLAIR像。该修复结果可用于:

  • 定量评估可挽救半暗带范围(与灌注图像比对);
  • 消除病灶在血流动力学建模中的干扰,提升梗死核心定位精度;
  • 辅助判断急性期是否需溶栓或介入取栓。
    该方法在首都医科大学宣武医院100例亚急性期卒中数据上,修复图像与真实随访正常化的PSNR平均提升3.5 dB,且未引入假性水肿或占位效应。