TryOffAnyone

义项:虚拟试衣相关工具
TryOffAnyone

TryOffAnyone 是一个从穿着服装的人物照片中生成标准平铺服装图像的开源AI工具与模型,由中国香港的研究者 Ioannis Xarchakos 与 Theodoros Koukopoulos 在2024年提出,相关成果以论文《TryOffAnyone: Tiled Cloth Generation from a Dressed Person》形式发布。它执行的是与虚拟试衣方向相反的"虚拟脱衣"任务,即把网络红人或模特身上的服装还原为可复用的商品级平铺图,用于电商商品图制作、搭配组合与虚拟试衣系统的素材准备[1][2]。

目录
  1. 定义
  2. 原理
  3. 发展历程
  4. 应用
  5. 局限
  6. 参见

定义

TryOffAnyone 是一个基于潜空间扩散模型的图像到图像生成工具,输入是一张人物穿着某件服装的照片以及标注该服装区域的掩码,输出是该件服装在标准视角下的平铺商品图[1][3]。它所属的任务在学术文献中被称为虚拟脱衣(Virtual Try-Off,VTOFF),与虚拟试衣(Virtual Try-On,VTON)的方向正好相反:虚拟试衣把标准服装图穿到人身上,虚拟脱衣则从真人照片中把服装"摘"出来并恢复成规范形态[4][2]。

论文将这一输出描述为满足商业目录标准的平铺服装图,强调其对形状、纹理与花纹的还原能力。作者指出,这类图像是电商展示、个性化推荐、整套穿搭组合以及虚拟试衣系统所依赖的基础素材,而真实拍摄与后期制作成本较高,因此用生成方式获得平铺图具有实际价值[1][3]。

原理

TryOffAnyone 以 Stable Diffusion 的图像修复(图像补全)版本为底座,在预训练权重上进行微调,而不是从零训练[5][1]。模型整体是一个单阶段网络:先由服装掩码圈定需要处理的目标衣物,再把人物图像与掩码一起送入潜在空间中的编码器,得到低维表示,随后由去噪网络在给定条件下迭代生成平铺服装图[6][1]。

为降低计算量,作者选择性地训练去噪网络中部分的变换器模块,并去掉了在该任务中并不必要的交叉注意力层,使网络结构比通用的条件生成模型更精简[1][3]。掩码的获取可以借助图像分割模型,官方发布的交互界面则提供画笔工具,让使用者在衣物区域手工涂抹生成掩码,再执行提取[7][6]。

在数学表述上,任务可看作学习从穿着照片 $I$ 到平铺服装图 $G$ 的条件分布 $P(G \mid I)$,推理时从近似分布中采样出与输入照片对应的服装图像[4]。训练完成后的推理过程由若干可调参数控制,界面中暴露的选项包括随机种子、条件强度、去噪步数与输出宽高[7]。

发展历程

与 TryOffAnyone 直接相关的论文于2024年12月发布在预印本平台 arXiv 上,编号为 2412.08573,作者为 Ioannis Xarchakos 与 Theodoros Koukopoulos,学科分类为计算机视觉[1][8]。论文发布后,作者在代码托管平台发布了官方实现仓库,并在模型托管平台公开了配套权重,同时提供了可直接在网页上运行的演示空间[2][5]。

在技术脉络上,虚拟脱衣并非全新概念。早期的平铺服装生成工作采用两阶段的生成对抗网络方案,但没有把该任务作为独立问题正式定义;TryOffAnyone 则与同期提出的 TryOffDiff 一道,把"从单张穿着照片重建规范服装图"明确为一个可评测的任务[4][9]。后续研究将这一任务从上半身服装扩展到上衣、下装与连衣裙等多种类别,并把虚拟脱衣与虚拟试衣组合起来使用[10]。

应用

该工具最直接的用途是电商服装商品图的制作。商家往往只有模特上身图或买家实拍图,缺少规范的平铺展示图,用该模型可以从这些照片生成接近目录风格的服装图像,减少影棚拍摄与人工修图环节[1][3]。阿里云开发者社区的介绍文章也把电商平台、虚拟试衣与个性化推荐列为其适用场景[6]。

在虚拟试衣流程中,平铺服装图是模型的输入条件之一,因此虚拟脱衣可以为试衣系统补充训练数据与商品素材,也能用于构建从买家实拍到商品页的检索通路[4][1]。官方仓库提供了在 VITON-HD 数据集上的批量评测脚本,并附带多种图像质量指标的计算,便于研究者把该模型作为基线进行比较[2][6]。

局限

官方说明指出,公开发布的模型权重仅适用于与 VITON-HD 数据集中风格相近的上衣,对下装、连衣裙等其他服装类别并未覆盖[2]。由于模型依赖掩码指定目标区域,掩码的准确性直接影响结果,需要人工标注或额外的分割步骤[7][4]。

从任务本身的难度看,输入照片中的服装往往被手臂、头发或配饰遮挡,并存在褶皱与形变,模型必须从有限视觉线索推断被遮挡部分,这使纹理、标识与复杂图案的还原仍存在误差[4][9]。相关研究还指出,SSIM 等传统结构相似度指标难以反映服装重建的感知质量,评估这类模型时需谨慎选择指标[4]。

参见

  • 虚拟试衣 —— 把标准服装图合成到人体上的相反方向任务,与本词条构成互补关系。

  • 潜空间扩散模型 —— TryOffAnyone 所依托的生成模型架构。

  • Stable Diffusion —— 本工具微调时使用的预训练图像生成模型。

  • TryOffDiff —— 同期提出的虚拟脱衣模型,采用图像编码器条件化方案。

  • VITON-HD —— 用于训练与评测的高分辨率虚拟试衣数据集。

  • 图像分割 —— 用于提取服装掩码、引导生成区域的技术。

参考资料

  1. huggingface.co 上的网页 [引用日期2026-10-29]
  2. try-off-anyone [引用日期2026-10-29]
  3. TryOffAnyone: Tiled Cloth Generation from a Dressed Person [引用日期2026-10-29]
  4. bmva.org 上的网页 [引用日期2026-10-29]
  5. README.md · ixarchakos/tryOffAnyone at main [引用日期2026-10-29]
  6. TryOffAnyone:快速将模特服装图还原为平铺商品图,生成标准化的服装展示效果 [引用日期2026-10-29]
  7. app [引用日期2026-10-29]
  8. TryOffAnyone: Tiled Cloth Generation from a Dressed Person [引用日期2026-10-29]
  9. Search results - November 27, 2024 (v1) [引用日期2026-10-29]
  10. Search results - April 17, 2025 (v1) [引用日期2026-10-29]
词条评价
词条统计

浏览次数:0 次

阅读量:0 次 · 阅读完成量:0 次

最近更新:2026-10-28T18:31:04Z

历史版本

本条目引用的词条
潜空间扩散模型 Stable Diffusion 图像分割 虚拟试衣 TryOffDiff VITON-HD