- 다양한 주제에 대해 자유롭게 글을 작성하는 게시판입니다.
Date 16/03/21 18:29:52
Name   Toby
File #1   face2face.jpg (87.1 KB), Download : 2
Subject   얼굴 표정을 실시간으로 대역처리하기




재미있는 자료가 있어 대충 번역 해봤습니다.

인물의 얼굴이 촬영된 영상이 있다면 그 영상에서 표정만 원하는대로 바꾸는 기술인데요.
이 기술이 놀라운 것은 대역의 표정이 거의 실시간으로 반영된다는 것입니다.

대중연설을 해야하는데 표정연기가 약한 사람이 있다면... 뒤에서 다른 사람이 얼굴 대역을 하는 시대가 곧 다가올지도 모르겠네요 ㅎㅎ


http://www.graphics.stanford.edu/~niessner/thies2016face.html

Face2Face : 영상에서 실시간으로 얼굴을 캡쳐하여 대역으로 교체하기



우리는 유튜브와 같은 특정 영상에서 실시간으로 얼굴 대역처리를 하는 새로운 접근방식을 제시합니다.
웹캠으로 대역을 실시간으로 캡쳐하여 원본 영상으로 사용합니다.

우리의 목표는 소스가 되는 재연 배우의 얼굴 표정 움직임을 사용하여 영상을 변형함으로서 실감나게 타겟 영상의 얼굴에 반영하는 것입니다.

먼저 얼굴의 모습이 억지스럽게 변형되는 문제를 해결하기 위해서 비경직성 모델 기반의 자료를 활용합니다.
영상이 재생되면 소스와 타겟 영상이 양쪽의 광도의 변화 측정을 통해 표정 변화를 추적합니다.
그리고 빠르고 효율적으로 영상을 변형하여 전달함으로서 소스와 타겟 사이의 차이를 최소화합니다.

입안의 내부는 타겟 영상 내에서 찾은 장면을 입모양에 맞게 변형하여 채워넣는 방법을 사용하여 최상의 품질을 구현했습니다.
마지막으로 우리는 타겟 영상의 품질이 설득력있어 보이게 하기 위해 영상의 공간에 맞는 조명효과를 더해 렌더링을 다시 합니다.

저희가 만든 시스템을 통해 유튜브의 영상이 실시간으로 대역처리되는 것을 보여드리겠습니다.




3


    얼굴 표정으로만 본다면 이 분야 갑은 아마 짐캐리가 아닐까 싶습니다.
    https://www.youtube.com/watch?v=7r7k5nyu2SM
    Jim Carrey - Epic face!
    파란아게하
    미 마이셀프 아이린 진짴ㅋㅋㅋㅋㅋ
    짐캐리 짱입니다.
    세상에 이제 영화에서 표정연기도 CG로 처리할 수 있겠네요.
    사실 영화에선 오래전부터 적용가능한 기술이긴 했지요. 예를들어 골룸의 얼굴 표정 처리라던지...
    배우의 표정이 부족해서 강화하기 위한 편집도 있었는지는 모르겠지만요.

    이 경우 놀라운 점은 실시간으로 반영이 된다는 점인데... 기술이 많이 발전했지요.
    목록
    번호 제목 이름 날짜 조회 추천
    2851 IT/컴퓨터마이크로소프트, 브라우저 점유율 3위로 추락 19 Leeka 16/05/21 4781 0
    2848 IT/컴퓨터안드로이드 N, 끊김없는 업데이트 기능 도입 16 Leeka 16/05/20 4090 0
    2812 IT/컴퓨터한 달 만에 앱 개발을 마쳤습니다. 49 F.Nietzsche 16/05/15 5983 5
    2768 IT/컴퓨터미국 IT 기업의 3년차 이하 연봉 조사 결과 7 Leeka 16/05/09 4461 1
    2733 IT/컴퓨터주파수 경매가 끝났습니다. 7 Leeka 16/05/02 4736 0
    2709 IT/컴퓨터요즘 게임에서 어뷰저를 걸러내는 방법 4 April_fool 16/04/28 5525 1
    2652 IT/컴퓨터[불판] Tmax OS 발표회 33 뒷짐진강아지 16/04/20 5604 0
    2651 IT/컴퓨터아이폰 SE 한국 가격이 공개되었습니다. 10 Leeka 16/04/20 5170 1
    2561 IT/컴퓨터카멜 FMA-2 모니터암 간단 사용기 4 탄야 16/04/07 8894 0
    2550 IT/컴퓨터100점 이상의 단어를 찾아서. 8 April_fool 16/04/05 7798 4
    2543 IT/컴퓨터100점짜리 단어를 찾아서. 29 April_fool 16/04/05 14482 11
    2509 IT/컴퓨터스마트워치 I5 Plus 간단 사용기 1 탄야 16/03/31 6914 0
    2507 IT/컴퓨터마이크로소프트의 충격적인 발표 21 Azurespace 16/03/31 8403 2
    2497 IT/컴퓨터최초의 웹브라우저 Mosaic 이야기 22 블랙자몽 16/03/30 5286 4
    2475 IT/컴퓨터한국 지도 데이터가 해외로 반출이 가능해질것 같습니다. 4 Leeka 16/03/26 5003 0
    2470 IT/컴퓨터인공지능 테이가 하루만에 오프라인이 된 사연 12 April_fool 16/03/25 6418 2
    2466 IT/컴퓨터최근 국내 PC 웹브라우저 점유율의 변화 35 Toby 16/03/24 15738 3
    2451 IT/컴퓨터데스크톱에서 여자친구 사진을 개선하는 신경망 5 April_fool 16/03/22 7069 1
    2445 IT/컴퓨터얼굴 표정을 실시간으로 대역처리하기 5 Toby 16/03/21 5184 3
    2438 IT/컴퓨터맥 사용한지 약 1년이 지난 후기 26 Leeka 16/03/21 7801 1
    2426 IT/컴퓨터여자친구의 사진도 개선하는 신경망 22 Toby 16/03/18 8845 0
    2407 IT/컴퓨터독일언론에서 긁어오기 - 알파고(4) 1 표절작곡가 16/03/15 6444 3
    2397 IT/컴퓨터알파고의 약점이란 31 Azurespace 16/03/13 20769 8
    2392 IT/컴퓨터독일언론에서 긁어오기 - 알파고(3) 3 표절작곡가 16/03/12 6649 1
    2389 IT/컴퓨터알파고가 이겼군요. 35 Azurespace 16/03/11 8145 10
    목록

    + : 최근 2시간내에 달린 댓글
    + : 최근 4시간내에 달린 댓글

    댓글