对Style Transfer里图像“风格”的理解

来源:6-12 图像风格转换V3算法

慕虎9426780

2019-10-27

看了下16年李飞飞团队的Paper

Perceptual Losses for Real-Time Style Transfer and Super-Resolution

里面有一张以《辛普森一家》的剧照作为风格的图像转换实例:
图片描述
明显感觉到作为风格目标的卡通图像里的色块被填充到了生成的目标图片中。让人感觉内容更像是图片里的轮廓,风格更像是图片里的“纹理”。
尤其是在视频介绍的v3算法中,对风格的度量从Gram矩阵变成了图片小块的内容match,似乎更像是在保证图像内容大体和原图相同的情况下,将图片的细节“纹理”一块块的换成风格图里的内容。DNN的作用更像是以“柔和”(adaptive)的方式将“纹理”贴进目标图像中。
不知道我这种把图像的“风格”和传统的图片“纹理”概念联系起来理解的方式,是否合理?

写回答

1回答

正十七

2019-10-28

同学你好,看到你的提问,我觉得你思考的比较深入。

我完全同意你的理解。内容更偏向于轮廓,风格则更像纹理。所以可能你可以把传统方法中和纹理相关的一些方法跟CNN相结合,看能不能达到更好的效果。

0
1
慕虎9426780
非常感谢!
2019-11-11
共1条回复

深度学习之神经网络(CNN/RNN/GAN)算法原理+实战

深度学习算法工程师必学,深入理解深度学习核心算法CNN RNN GAN

2617 学习 · 935 问题

查看课程