基于多模态表征融合的高保真虚拟试衣方法及系统

本发明提出一种基于多模态表征融合的高保真虚拟试衣方法及系统，属于计算机图像生成领域，包括：S1：将人物图像和服装图像输入外观保持变形对齐模块，输出外观流图<Image he="54" wi="50" file="ZY_1.GIF" imgContent="drawing" imgFormat="GIF" orientation="portrait" inline="yes"/>，从而实现服装与人物之间的几何对齐，并保留服装的外观细节；S2：构建语义表示与理解模块用于为服装属性提供语义表示，并为服装图像生成对应的文本，确保在多种人体姿态下，服装与人体之间的语义对齐一致性；S3：构建多模态先验引导的外观生成模块，整合多模态特征与预训练模型的先验知识，以优化外观生成效果，实现语义与几何的一致统一。本发明方法能够精准地将服装对齐到人体，同时保留服装的细粒度细节信息。