随着计算机图形学和人工智能技术的飞速发展,实时风格化迁移生成渲染技术在游戏、影视制作、虚拟现实(VR)、增强现实(AR)以及数字艺术创作等领域展现出巨大的应用潜力。传统渲染技术往往侧重于真实感的追求,而风格化渲染则能够为用户带来独特的视觉体验,满足日益增长的个性化需求。然而,当前市场上的风格化迁移技术多基于静态图像处理,难以实现连续且稳定的实时风格化效果,尤其是在高分辨率、高帧率要求下,这一技术瓶颈尤为突出。本技术需求旨在解决这一问题,通过研发人工智能实时帧风格化迁移生成渲染技术,为各类应用场景提供高效、稳定、高质量的风格化渲染解决方案,满足用户对动态内容风格化的迫切需求。
根据参考风格对原输入内容进行连续且稳定的实时风格化迁移;风格上需要保证和参考风格高度统一,连续一直无闪烁;性能上处理效率需要大于30fps,分辨率大于2560*1440;材质上要符合PBR或指定材质系统的真实物理表达,例如遵循金属度和反射率;输出上需要支持大于16bit的深度,提供更大的动态范围。 难点:硬件上现今显卡算力不足(达不到预期1%),同时软件缺少连续性算法,扩散性算法内容生成随机,无法做到连续稳定生成。
