新型美颜技术让你变明星
新型美颜技术让你变明星
图片美化前后对比图 图片来源:西弗吉尼亚大学
发布自拍前美颜一下,已成为当下爱美一族的常规操作。但是,无论如何美化,美丽的世界仍有一些难以逾越的门槛,比如面部五官的形状等难以美化。近日,西弗吉尼亚大学和ObEN公司提出了一种新型人脸美化技术,能够基于参照图像提升人脸的颜值,也就是说你的自拍也能变得跟明星一样美。相关论文成果发布在提交论文预印本的平台arxiv.org上。
目前,人脸美化通常基于美妆应用或妆容迁移思想的虚拟人脸美化技术,其中包括 PairedCycleGAN、BeautyGAN、BeautyGlow。其实,妆容迁移只是风格迁移的一种特例,其中描述风格的只有局部特征而已,比如眼影或唇彩。
该论文作者Xudong Liu希望搭建一种更通用的解决方案,能够同时迁移参照图像全局和局部风格代码,通过一到多转译来描述人脸美化的过程。一方面,可通过参照图像逐渐迁移所学习的美颜表征,得到颜值单调增长的输出图像。另一方面,通过学习一系列参照图像得到多种不同的个性化美化结果。
为了实现这一目标,研究人员提出了一种全新的生成对抗网络(GAN)架构。结合近期在基于风格的合成和基于数据的人脸颜值理解方面的最新进展,将基于风格的美颜表征和数据库训练得到的颜值预测整合进人脸美化的过程中。具体来说,基于风格的美颜表征将通过轻量卷积神经网络(LightCNN),从待美化和参照图像中提取,然后将其用于引导风格迁移过程,即美化过程。
Xudong Liu表示,基于 LightCNN 的微调训练了一种人脸颜值预测网络,并将其整合进了新提出的基于风格的人脸美化网络中。这个预测模块能为合成模型提供有价值的反馈,从而接近所需的颜值。
而后,研究人员构建了一个整合重建损失、美颜损失和身份损失函数的专用的基于 GAN 架构。为了对美化过程有细粒度的控制,同时还发明了一种简单但有效的重新加权策略,可逐渐提升合成图像的颜值,直到其达到参照图像水平。
研究人员介绍,这样的人脸美化问题可以表述为两个子问题:风格迁移和颜值预测。随着细粒度的风格迁移的进行,被美化的目标人脸的颜值会单调增长,向参照人脸的颜值靠拢。
评估发现,相比于 CycleGAN、MUNIT 和 DRIT 等当前最佳的图像到图像转译技术,新提出的方法表现更优,甚至能稳健地处理模糊和高难度光照条件下的低质量图像。
但是,研究人员也注意到,当输入存在较大遮挡和姿势差异时,模型往往会产生一些可见的伪影。主要原因是参照图像基本都是正脸图像,而较大遮挡和姿势差异会导致无法很好地对齐。
研究界认为,该研究提供了首个用细粒度控制人脸美化结果的方案,并且实现了美颜效果的定量控制,这种人脸美化技术应用起来更加灵活。(来源:中国科学报 卜叶整理)
同类文章排行
- 《鹭世界》:为每个顽强的生命喝彩 – 《鹭世界
- 喜讯!铭普光磁荣获“国家知识产权示范企业”
- 欧司朗发布新款LED, 适用于超薄的车头灯设计
- ACSS2020: 自动驾驶时代和ISO / SAE 21434法规下的安全
- 2020中国5G产业博览会邀请函
- 这场集成电路创新论坛在西安盛大举办
- 高频变压器磁芯与变压器有什么关联?
- 王健林又悄悄卖了几家万达广场!保险、信托接
- 2020将是无线运营商的关键决策之年
- 广西壮族自治区建设工程机电设备招标中心LED路
最新资讯文章
- 工业应用技术交流群开放加入
- 无法亲临慕尼黑电子展?大比特官方视频直播带
- 复古制造工艺可降低现代连接器密度
- 浚县市容管理处浚县城区照明系统提升改造工程
- 大方县达溪镇人民政府采购冷底村太阳能异型路
- 江苏省烟草公司泰州市公司泰州市局机关大楼院
- 元氏县中医院医技楼、综合楼、治未病中心亮化
- 内蒙古乃蛮部落文化旅游发展有限公司宝古图汽
- 福建榕卫招标有限公司关于福建人民艺术剧院灯
- 广西壮族自治区建设工程机电设备招标中心LED路
- 清远市清城区飞来峡镇独树村委会主干道亮化工
- 福建省仟羽工程咨询有限公司关于晋江市中心城
- 敖汉旗城镇管理局新惠城区亮化工程公开招标招
- 福建鑫盛招标有限公司关于惠安县惠东工业园区
- 行家大数据 · 2019年度影响LED显示屏产业的重要案
- 2020将是无线运营商的关键决策之年
- 自动化和分散化驱动2020年网络发展
- 艾迈斯半导体推出先进的光谱ALS传感器,旨在帮
- 第七届中国国际商用车、专用车及技术装备展览
- 拥抱新工业,谋篇新未来 2020 ITES深圳国际工业制