深大研发最新算法让图像风格化
创始人
2025-03-06 14:02:06
0

【深圳商报讯】(首席记者 吴吉)社交媒体头像可以瞬间切换风格?主页背景、相册封面可以秒变画风?近日,深圳大学计算机与软件学院可视计算研究中心黄惠教授团队的最新研究成果“视觉特征迁移算法”被计算机视觉顶会CVPR 2025接收。该算法能让图像风格化,无论是诺贝尔奖头像风格、毕加索的抽象线条,还是各种天马行空的抽象画风,统统不在话下!

视觉特征迁移,指的是将一幅图像(称为“参考图像”)中独特的视觉特征,如色彩、纹理、笔触、甚至更高层次的艺术风格或材质感,迁移到另一幅图像(称为“目标图像”)上,从而生成一幅既保留了内容图像的结构和语义信息,又融合了风格图像视觉特性的新图像。该问题一直是计算机视觉和图形学领域一个重要且颇具挑战性的话题,是AIGC的重要任务之一,广泛应用于艺术创作、图像编辑、虚拟现实等领域,具有重要的研究意义和应用价值。

深圳大学团队的成果由计算机与软件学院可视计算研究中心黄惠教授领衔,副教授周漾带领的硕士研究生高旭、陈子冲开发。团队提出了一种通用且高效的视觉特征迁移方法,适用于多种基于样例的图像合成应用,如艺术风格迁移、外观迁移、风格化文本到图像生成以及各种纹理合成任务。

与以往使用自注意力特征作为即插即用属性的方法不同,该方法充分利用预训练扩散模型的强大语义以及注意力机制,设计了一种新的注意力蒸馏损失。该损失通过构建“理想”风格化目标并计算与当前风格化结果之间的差异,在潜空间中反向传播优化生成图像的隐变量,克服了基于特征注入方法存在的域差距、架构限制和误差累积等局限性。来自扩散模型的紧密语义对应关系确保了高保真的局部纹理细节还原,而基于注意力的全局关系建模则带来了整体视觉分布的一致性。

此外,论文还提出了一种改进的分类器引导,将注意力蒸馏损失整合到去噪采样过程中,进一步加速了合成过程,并实现了更广泛的图像生成应用,包括风格化文生图以及与ControlNet、MultiDiffusion的联合使用。大量的实验和与最先进方法的比较表明该方法在基于样例的风格、外观和纹理等视觉特征迁移任务中有着非凡性能。

相关内容

热门资讯

原创 悬... 中国汽车行业的“扫黑风暴”似乎没有停下去的意思了。 继比亚迪悬红500万元征集“黑公关”线索外,华为...
原创 笑... 小时候方便面很稀缺,有次我姑姑来买了一箱方便面,老妈收了起来,我趁老妈不在家偷了一袋藏书包里。那时我...
两会申聚焦|老有所养、亦有所乐... 祝碧晨 设计 养老这件事,对于全国最早迈入老龄化的城市上海来说,来得更为迫切一些。 根据上海市民政部...
听两会代表委员谈文艺发展如何与... 【环球时报记者 张妮 陈茜 冀昱樵 李予澈 丁雅栀 环球时报特约记者 米广弘】编者的话:“艺术创作和...
救援有利器!“低空经济”在消防... 近年来,“低空经济”的概念逐渐进入公众视野。作为新质生产力的代表,以无人机为代表的“低空”飞行器,在...
原创 如... 如果还是这样,湖人是不可能赢得!湖人打绿军是不是无解了?感觉绿军针对东契奇的防守甚至可以说是联盟独一...
博奥斯能源:光储柔直互联系统的... 随着智能电网的发展和能源转型的加速,光储柔直互联系统作为一种先进的能源系统架构,正逐渐成为能源领域的...
同源康医药TY-9591II期... 财中社3月9日电同源康医药-B(02410)发布公告,宣布其自主研发的TY-9591(商品名:卡达沙...
九分钟透明挂!wpk有机器人外... 九分钟透明挂!wpk有机器人外挂透明挂工具,wepOkE软件透明挂,详细教程(有挂技巧)-哔哩哔哩;...