Advertisement

自动生成语义风格转换机制和逻辑过程

阅读量:

总说

从本质上讲,这与Deep photo具有相似之处,二者均引入了分割mask的处理方式。与Deep Photo方法相比,该方案依然沿用Gram矩阵匹配的策略来计算风格损失,只不过所采用的是CNNMRF模型中的风格损失函数。

这里写图片描述

构建该框架时,同样需要选择一个具备特征提取能力的模型,通常会采用VGG19作为基础。随后,在隐藏层中引入特定的损失函数进行计算,主要包括内容损失与风格损失。这些要素构成了整个方法的核心部分。与CNNMRF方法相比,本文所提出的方法主要区别在于引入了软掩码机制,否则两者在实现上几乎没有任何差异。然而,在引入语义掩码时,实际上是借鉴了Deep photo的相关思路。简而言之,该方法结合了CNNMRF中的风格损失,并将Deep photo中的语义掩码纳入到风格损失的计算过程中。通过这样的整合方式即可完成整体设计。不过这种方法的运行速度较慢,与Deep photo类似,采用迭代优化的方式是否能提升速度仍有待验证。此外,并未将该方法与Deep photo进行效果对比,毕竟与CNNMRF相比已属次要问题。值得一提的是,本文并未使用硬掩码而是采

全部评论 (0)

还没有任何评论哟~