Bingdada 技术博客Bingdada 技术博客
首页
博客
SEOGEOAEOAI
工具关于
登录注册
Logo

Bingdada 技术博客

专注于SEO搜索引擎优化和GEO生成式引擎优化以及未来人工智能发展趋势的技术博客

快速链接

  • 首页
  • 博客文章
  • 关于我们

联系方式

  • 398848662@qq.com

订阅我们的 Newsletter,获取最新的 SEO 和 GEO 技术资讯。

© 2024 Bingdada 技术博客. All rights reserved.

苏ICP备2026080046号

首页博客国产 AI 前线视频消除告别穿帮:美图 BridgeRemoval 如何用随机桥模型解决时序一致性难题?
视频消除告别穿帮:美图 BridgeRemoval 如何用随机桥模型解决时序一致性难题?
国产 AI 前线

视频消除告别穿帮:美图 BridgeRemoval 如何用随机桥模型解决时序一致性难题?

bingdadabingdada
八月 20, 202671 次阅读约 6 分钟阅读
快速回答

BridgeRemoval 是美图影像研究院提出的视频目标移除新框架,首次将该任务定义为视频到视频的翻译,通过基于 VP-SDE 的随机桥模型锚定源视频结构,配合自适应掩码调制,有效解决了背景保真与时序一致性问题。

核心要点
  • BridgeRemoval 首次将视频目标移除定义为视频到视频的翻译任务,而非传统的噪声生成任务。
  • 随机桥模型以源视频为强先验,生成轨迹锚定输入结构,选择性变换遮罩区域。
  • 自适应掩码调制动态调节结构依赖,平衡大面积移除与背景保真。
  • 在 DAVIS 与 BridgeRemoval-Bench 数据集上 PSNR 均最高,专家主观评估全面领先。
  • 技术已落地美图秀秀、Wink 及开拍 APP,解决实际视频编辑痛点。
目录

目录

  • 从“噪声生成”到“桥接翻译”:一种新思路的诞生
  • 技术拆解:BridgeRemoval 的三大支柱
  • 1. 随机桥模型:锚定源视频结构
  • 2. 基于 SDE 求解器的推理:保证轨迹严格约束
  • 3. 自适应掩码调制:破解“过于忠实”的难题
  • 实验验证与商业化落地
  • 国内视角:视频编辑技术的竞争格局
  • 常见问题
  • BridgeRemoval 与传统的扩散模型有何本质区别?
  • 自适应掩码调制解决了什么问题?
  • 该技术目前有哪些实际应用?
  • ICML 2026 的录用意味着什么?
  • 随机桥模型相比参考帧引导机制有何优势?
  • 关于 Bingdada

在图像编辑领域,AI 消除路人或杂物已成为日常操作。然而,当这一需求从静态图片延伸到动态视频时,技术难度陡然上升。视频目标移除不仅要保证单帧画面的完整性,还需兼顾帧间时序的连贯性,稍有不慎便会出现背景模糊、物体残留甚至画面扭曲等“穿帮”现象。

传统主流方案多依赖扩散模型,其生成逻辑是从纯噪声逐步恢复数据。这种范式虽然能生成丰富细节,却忽略了源视频中已有的结构和场景信息,导致在处理大面积遮挡或复杂物理逻辑时,容易出现消除不彻底或生成内容与场景矛盾的问题。业界普遍通过引入参考帧引导来缓解,但这无疑增加了系统的复杂度和计算负担。

从“噪声生成”到“桥接翻译”:一种新思路的诞生

美图影像研究院(MT Lab)近期提出了一种名为 BridgeRemoval 的新框架,其核心创新在于将“视频目标移除”重新定义为“视频到视频的翻译任务”。该研究已被机器学习顶级会议 ICML 2026 录用,相关论文与项目主页均已公开(论文链接、项目主页)。

这一视角的转变意味着,生成过程不再是从无到有的“凭空创造”,而是从源视频到目标视频的“定向转换”。BridgeRemoval 基于方差保持随机微分方程(VP-SDE)构建了直接生成路径,更好地平衡了背景保真度与生成灵活性。

技术拆解:BridgeRemoval 的三大支柱

1. 随机桥模型:锚定源视频结构

区别于标准扩散模型从高斯噪声出发,BridgeRemoval 采用基于 VP-SDE 的桥模型。它将被遮挡的源视频作为生成过程的强前置约束,使生成轨迹牢牢锚定在输入视频的结构之上。模型的训练目标从“去噪”转变为“学习从源到目标的速度场”,从而能够有选择性地仅对遮罩区域进行变换,同时最大程度保留未遮挡背景的真实细节。

2. 基于 SDE 求解器的推理:保证轨迹严格约束

在推理阶段,BridgeRemoval 从源视频隐变量出发,沿逆向 SDE 轨迹逐步逼近目标。通过解析推导的修正采样策略,系统确保生成轨迹严格服从桥约束,从而在目标物体被完全移除后,仍能产出背景连贯、时序稳定且画质更优的视频。

3. 自适应掩码调制:破解“过于忠实”的难题

当直接利用强先验移除大尺寸物体时,模型可能因“过度忠实”源视频结构,而难以生成大面积的合理新区域。为此,BridgeRemoval 引入了自适应掩码调制策略,根据掩码的空间特征动态调节对源视频结构的依赖程度。对于大面积遮挡区域,适当放松结构约束以生成合理新内容;对于有效背景区域,则保持高度保真。

实验验证与商业化落地

定量实验显示,BridgeRemoval 在 DAVIS 与 BridgeRemoval-Bench 两个数据集上均取得了最高的 PSNR 值,并在 CLIP-T 指标上表现极具竞争力。定性比较结果同样表明,其在还原背景的干净度、稳定性和场景逻辑一致性上均优于现有基线。由 24 名研究人员和行业专家参与的主观评估也确认,该框架在文本一致性、背景保真度和时序连贯性三个维度上均显著领先。

目前,这一技术已落地于美图秀秀、Wink 的“视频美型背景保护”功能,解决了人像视频编辑中常见的栏杆变弯、背景形变等问题。同时,该能力也应用于开拍 APP 的“智能全消”功能,支持最长 5 分钟的视频输入,可自动识别并消除视频中的文字。

国内视角:视频编辑技术的竞争格局

美图此次在 ICML 2026 上的成果,反映了国内影像技术团队在底层算法研究上的持续投入。放眼国内,字节跳动的剪映、快手的快影等产品也在视频编辑领域积极探索 AI 消除与生成技术。与美图聚焦于“背景保护”和“精准消除”不同,部分国内厂商更侧重于“智能生成”和“一键成片”等场景。美图选择从“随机桥模型”这一底层技术切入,体现了其在影像垂直领域的深耕思路,旨在通过解决时序一致性这一行业痛点,建立差异化的技术壁垒。

常见问题

BridgeRemoval 与传统的扩散模型有何本质区别?

传统扩散模型从纯高斯噪声开始生成,丢弃了源视频的有效结构信息;而 BridgeRemoval 采用随机桥模型,将源视频作为强前置约束,生成轨迹锚定在输入结构上,实现了“视频到视频”的直接翻译,而非“噪声到数据”的重建。

自适应掩码调制解决了什么问题?

它解决了模型在移除大尺寸物体时“过于忠实”源视频结构的问题。通过根据掩码空间特征动态调节约束强度,系统能在需要生成大面积新区域时适当放松约束,同时对有效背景保持高度保真。

该技术目前有哪些实际应用?

该技术已落地于美图秀秀和 Wink 的“视频美型背景保护”功能,解决人像编辑时的背景形变问题;同时应用于开拍 APP 的“智能全消”功能,支持最长 5 分钟视频的文字自动识别与消除。

ICML 2026 的录用意味着什么?

ICML 是机器学习领域的三大顶级会议之一,论文被其录用代表该研究在理论创新和实验验证方面获得了国际学术界的认可,具备较高的学术价值与行业参考意义。

随机桥模型相比参考帧引导机制有何优势?

参考帧引导机制需要额外设计复杂的引导模块,增加了系统复杂度。而随机桥模型通过数学上严格的 SDE 轨迹约束,天然地将源视频信息融入生成过程,在保持背景保真度的同时,简化了系统架构,并提升了时序一致性。

关于 Bingdada

Bingdada 是一个专注 SEO、GEO(生成式引擎优化)与 AEO(答案引擎优化)的内容平台,由资深内容编辑、SEO 技术工程师与 AI 研究专家组成的团队持续运营。我们追踪搜索引擎与生成式 AI 的最新动态,为读者提供准确、实用、可落地的方法论与行业洞察。

编辑团队:内容策划 · 技术编辑 · AI 研究组
网站:bingdada.com

© 2026 Bingdada. 保留所有权利。

目录

  • 从“噪声生成”到“桥接翻译”:一种新思路的诞生
  • 技术拆解:BridgeRemoval 的三大支柱
  • 1. 随机桥模型:锚定源视频结构
  • 2. 基于 SDE 求解器的推理:保证轨迹严格约束
  • 3. 自适应掩码调制:破解“过于忠实”的难题
  • 实验验证与商业化落地
  • 国内视角:视频编辑技术的竞争格局
  • 常见问题
  • BridgeRemoval 与传统的扩散模型有何本质区别?
  • 自适应掩码调制解决了什么问题?
  • 该技术目前有哪些实际应用?
  • ICML 2026 的录用意味着什么?
  • 随机桥模型相比参考帧引导机制有何优势?
  • 关于 Bingdada
常见问题
黄金广告位 · 限时招商
广告位招商中

把品牌放进读者的阅读流

文章内广告位,高注意力场景,适合新品发布与活动招募。

商务合作

标签

#BridgeRemoval#视频目标移除#随机桥模型#ICML 2026#美图影像研究院#视频编辑
bingdada

bingdada

SEO & GEO 技术探索者,专注于搜索引擎优化和生成式引擎优化。

相关文章

当AI医生学会「跨科会诊」:清华系团队如何让多智能体协同走进真实诊室
国产 AI 前线

当AI医生学会「跨科会诊」:清华系团队如何让多智能体协同走进真实诊室

清华AIR孵化的紫荆智康推出多分身智能体协同技术,让不同专科的AI医生在真实诊室中协作,把多学科会诊前置到首诊环节,并在虚拟训练与现实微调中持续进化。

10月 22约 8 分钟阅读
小模型逆袭旗舰:MiniMax M3.1 Flash如何用极致性价比重塑Agent落地逻辑
国产 AI 前线

小模型逆袭旗舰:MiniMax M3.1 Flash如何用极致性价比重塑Agent落地逻辑

MiniMax M3.1 Flash 正式亮相,以 29.6% 的 ALE 得分拿下国产 Agent 第一,同时把综合成本压到前代 30%。本文拆解其跑分表现、极速低价策略,以及国产 Flash 双子星如何改写企业级 Agent 的落地逻辑。

10月 21约 7 分钟阅读
实时渲染与状态解耦:VAST开源EdenLive如何让消费级显卡跑出720P交互世界
国产 AI 前线

实时渲染与状态解耦:VAST开源EdenLive如何让消费级显卡跑出720P交互世界

VAST开源实时世界模型EdenLive,以状态与渲染解耦架构在单张RTX 5090上实现720P超24FPS生成,覆盖游戏预览、场景动画、视频重渲染与具身数据增强四类场景。

10月 20约 8 分钟阅读

订阅我们的 Newsletter

获取最新的 SEO 与 GEO 技术资讯。

我们尊重您的隐私,随时可以取消订阅。

评论 ({count}) (0)

登录后即可参与讨论

登录注册
还没有评论,来抢沙发吧