您正在使用IE低版浏览器,为了您的雷峰网账号安全和更好的产品体验,强烈建议使用更快更安全的浏览器
此为临时链接,仅用于文章预览,将在时失效
人工智能 正文
发私信给陈淑瑜
发送

0

CVPR 2026 | EchoForge:全新半监督超声心动图视频分割框架

本文作者: 陈淑瑜   2026-05-26 14:00 专题:CVPR 计算机视觉与模式识别会议
导语:EchoForge 为解决标注受限条件下的心脏超声精准影像分析带来了新的进展。

来源:公众号“深圳大学计算机与软件学院”

作者:房云鹏

原文链接:https://mp.weixin.qq.com/s/uWReTqghPxC-DJzRwvMV5g


自动、精确的超声心动图视频分割对于高效、可重复地测量关键临床心功能指标(如射血分数等)以及心血管疾病的诊断至关重要。然而,由于超声影像固有的散斑噪声、心脏结构的复杂动态运动,以及标注数据的严重稀缺,这在临床和计算领域仍然是一个极具挑战性的任务。

深圳大学计算机与软件学院吴惠思教授团队及香港理工大学秦璟教授等人在该方向上完成了一项创新工作,提出了一种全新的半监督模型EchoForge。该工作成功入选CVPR 2026,为解决标注受限条件下的心脏超声精准影像分析带来了新的进展。下面让我们深入了解下它。

CVPR 2026 | EchoForge:全新半监督超声心动图视频分割框架

Yunpeng Fang1, Yimu Sun1, Jingxing Guo1, Huisi Wu1*, Jing Qin2

1Shenzhen University

2The Hong Kong Polytechnic University

  • 项目主页:https://github.com/YunPeng-Fang/EchoForge


一、问题定位

超声心动图是临床心脏评估的一线工具,但自动分割面临着三大障碍:

  • 图像质量差:超声图像本质上受到散斑噪声和伪影的干扰,导致目标解剖边界极其模糊。

  • 动态变化大:在心脏收缩和舒张期间,心脏结构的形状和尺度会发生显著的时空动态变化。

  • 标注成本高:人工逐帧勾画极其费时费力,导致训练数据通常极其稀疏(一般仅包含舒张末期和收缩末期的关键帧标注)。

现有的基于深度学习的解决方案往往存在局限性:传统2D卷积网络忽略了时序一致性,极易受噪声干扰;引入光流的方法对散斑噪声过于敏感;而现有的半监督方法在早期生成的伪标签质量较差,初始错误会在训练中不断累积,从而严重削弱了模型对未标注帧的学习能力。


二、方法概览


该工作提出了一种名为EchoForge的全新半监督超声心动图视频分割框架。该方法的核心思想是通过“锚点语义感知”来克服噪声与形态突变,并通过“连续伪标签重铸”机制充分挖掘未标注的视频帧数据。该方法主要包括两大创新部分:

01

锚点语义感知(ASA)

利用一组可学习的“锚点”灵活调整模型在不确定区域的特征,有效抑制散斑噪声干扰;同时提取语义原型注入当前帧,增强边界的时空一致性。

02

连续伪标签重铸(CPR)

在ASA的基础上,通过轻量级的通道级注意力机制逐步整合高质量伪标签,并对其进行持续重铸,为未标注的中间视频帧提供强大的监督信号。


三、技术贡献




提出了一种高效的半监督框架EchoForge



包含锚点语义感知(ASA)和连续伪标签重铸(CPR)两个创新模块,专为解决超声心动图视频分割中的噪声和标注稀缺问题量身定制。

设计了基于锚点的特征校准与语义传播机制



ASA模块能够灵活调整模型不确定区域的特征并传播关键语义原型,从而在有效抑制散斑噪声的同时,显著增强心脏边界的时空一致性。

构建了稳定可靠的伪标签重铸策略



建立在ASA之上的CPR模块,通过渐进式地整合并重铸高质量伪标签,实现了对未标注数据的稳健监督,该方法在两大基准测试中均达到SOTA性能,并保持了超高的实时推理速度。


四、技术方案




该方法的具体流程如图1所示。其输入为稀疏标注(仅标注舒张/收缩末期)的超声心动图视频序列。

CVPR 2026 | EchoForge:全新半监督超声心动图视频分割框架

图1. 方法流程

首先,针对超声图像特有的强散斑噪声,该方法在ASA模块中引入了锚点重新校准(ARC)策略,如图2所示。不同于常规目标检测中的候选框,这里的“锚点”是一组携带前景和背景先验信息的可学习特征向量。它们像磁铁一样在复杂的超声背景中吸引最相似的局部特征块,对于高置信度区域保留原始特征,而对置信度模糊的区域则通过线性插值动态调整权重,从而有效剔除噪声干扰。

为了处理心脏跨帧的巨大形变,ASA模块中进一步设计了时序语义融合(TSF)机制。它通过掩码池化从具有标注特征的参考帧中提取出关键的语义标签(解剖学原型),并利用上下文融合模块与交叉注意力机制,将这些纯净的结构先验深度注入到目标帧中,引导模型在不同姿态下生成更精准的边界并保持时序连贯性。

CVPR 2026 | EchoForge:全新半监督超声心动图视频分割框架

图2. 锚点更新过程

在半监督学习方面,为了防止错误伪标签累积,该方法提出了连续伪标签重铸(CPR)模块。CPR将模型生成的已标记帧特征作为Query,未标记帧特征作为Key和Value,通过计算通道级交叉注意力来重建无标签帧的特征,并生成高质量的新伪标签。配合创新的FlameRise训练策略(随训练 Epoch逐渐增加伪标签监督的权重及置信度阈值),巧妙地防止了模型对早期低质量预测的过拟合。


五、结果展示




如下图所示,该方法在CAMUS和EchoNet-Dynamic两个基准的超声数据集上进行了全面验证。

CVPR 2026 | EchoForge:全新半监督超声心动图视频分割框架

图3.可视化结果对比

即使在散斑噪声严重、边界极其模糊的挑战性案例中,得益于ASA模块的时空特征增强和CPR模块的高质量伪标签再生,EchoForge依然展现出了更精确、更连贯的轮廓划分能力。


六、总结展望




自动超声心动图视频分割在心血管疾病诊断中具有极高的科研与临床工程价值。针对超声图像噪声大、心脏运动复杂以及标注数据极度稀缺的三大核心痛点,本文提出了一个极为新颖的半监督框架EchoForge。通过创新的锚点语义感知(ASA)降低噪声不确定性,并结合连续伪标签重铸(CPR)机制充分挖掘未标记序列的潜力,大幅提升了分割算法的鲁棒性和时序连贯性。该工作不仅为超声心动图计算提供了强大的实时解决方案,其核心机制也为更广泛的半监督医学视频分割任务开辟了全新的思路。



雷峰网版权文章,未经授权禁止转载。详情见转载须知

CVPR 2026 | EchoForge:全新半监督超声心动图视频分割框架

分享:
相关文章
最新文章
请填写申请人资料
姓名
电话
邮箱
微信号
作品链接
个人简介
为了您的账户安全,请验证邮箱
您的邮箱还未验证,完成可获20积分哟!
请验证您的邮箱
立即验证
完善账号信息
您的账号已经绑定,现在您可以设置密码以方便用邮箱登录
立即设置 以后再说