Wavelet Transform-Based Photorealistic Style Transfer Using Optimal Transport
Gyeongmin Bae, Daeyoung Park · 한국통신학회논문지 · 2021
스타일 변환(style transfer)은 컨텐츠 이미지(content image)의 공간 정보를 유지하면서도 컨텐츠 이미지의 스타일을 스타일 이미지(style image)의 스타일로 바꾸는 과정이다. 기존 연구로는 스타일 분포(style distribution)의 second-order statistics가 같아지도록 그람 행렬(Gram matrix)을 이용하는 방법과 instance normalization을 이용하는 방법 등이 있다. 본 논문은 이 방법들을 일반화시킨 최적 전송(optimal transport)을 웨이블릿(Wavelet) 변환에 적용해서 사진과 비슷한 이미지를 생성하는 실사적 스타일 변환(photorealistic style transfer)에서 스타일 변환 성능을 개선하는 방법을 제안한다.