본문 바로가기

Project/AI_Human(GAN)

[AI Human 5] FSGAN inference 성능 높이기 간단 팁

이거는 모델적인 튜닝은 아니고 

영상 넣을 때 source로 들어가는 영상이 너무 배경이 화려(?)하면 얼굴 합성이 잘 안되길래 적용한 간단 팁.

 

FSGAN에 애초에 face detection 부분이 있어서 사실 웬만한 걸 넣어도 알아서 얼굴 잘 디텍해서 붙여주긴 하는데

 

출처: MBN

이런걸 소스 영상으로 넣었더니 얼굴을 잘 못찾았는지;

내가 봐도 무서워서 작게 넣음 ㅠ; 개인적인 감정 없습니다;;

이런 식으로 완전 뒤섞여버린 합성 영상이 만들어짐 ㅠ;; 다른 영상 소스로 넣었을 때 이런 문제는 없었는데

이렇게 까지 낮은 퀄의 결과가 나오는건 소스 탓인거 같아서

 

어도비 프리미어를 이용하여 간단하게 소스 영상에서 얼굴 근처에 배경을 많이 날려 주고 다시 넣음.

이런식으로 소스 영상을 다시 처리해서 넣어주니

다시 이런식으로 비교적 얼굴이 잘 붙은 영상을 얻을 수 있었다. 그나저나 output이 심하게 저화질 영상으로 나오는건  코드를 좀 수정해야 할 듯.