실시간 고해상도 딥페이크 | ReHiFace-S

ReHiFace-S: 실시간 고해상도 얼굴 교체 딥러닝 기술

「Roop」, 「FaceFusion」, 「roop-unleashed」 등 그동안 소개한 딥페이크 도구와는 달리 ReHiFace-S(Real Time High-Fidelity Faceswap)는 실시간으로 얼굴을 다른 사람의 얼굴로 교체하는 딥러닝 기반 기술. 그뿐만 아니라 얼굴 이미지와 동영상만 있으면 누구라도 딥페이크 기술을 체험해 볼 수 있는 쉬운 사용법도 장점. 다만, 실시간 딥페이크 작업을 위해선 최소 NVIDIA GTX 1080Ti 이상의 GPU가 필요하고, 이외에도 기본적으로 CUDA가 필요해 내 노트북에선 테스트해 볼 수 없었다는 것은 아쉬운 점.

여담이지만, 텔레그램이나 딥페이크 기술이 악용되니까, 그것들을 아예 사용하지 못하도록 서비스를 닫거나 개발을 중지해야 한다고 주장하는 사람들이 더러 있는데, 참으로 기가 막힌 발상이다. 그럴 바엔 아예 한국과 해외를 연결하는 광케이블을 죄다 끊어버리는 것이 낫지 않겠나? 보이스 피싱 차단을 위해 휴대전화 서비스를 중지하고, 전 세계 남성의 성기를 절단해 성폭행 피해를 막고? 참 좋지 아니한가? 그런 얼토당토아니한 소리는 ‘사고의 자유’ • ‘창작의 자유’ • ‘표현의 자유’ 같은 인간만의 뛰어난 지성을 전혀 사용하지 않는 사람들이나 할 법한 개소리.

아무튼, 딥페이크 기술을 악용해 누군가를 모욕하는 행위는 상대 앞에선 말대꾸 한 번 제대로 한 번 못 하는 찌질한 겁쟁이들이나 하는 치졸하고 비겁한 행위.

ReHiFace-S 장단점(출처: Gemini)

장점

실시간 처리: ReHiFace-S는 초당 프레임 단위로 얼굴을 교체할 수 있는 실시간 기술

높은 충실도: 다른 얼굴 교체 기술보다 훨씬 높은 충실도로 얼굴을 교체

끊임없는 과도: 얼굴 교체는 부드럽고 끊김이 없이 이루어짐

다양한 얼굴 모양 지원: 다양한 얼굴 모양과 표정을 처리할 수 있음

단점

컴퓨팅 요구 사항: 실시간 성능을 유지하려면 상대적으로 강력한 컴퓨팅 자원이 필요

ışık 조건 민감성: 빛의 조건이 변경되면 얼굴 교체 성능이 저하될 수 있음

원본 얼굴이 작거나 모호할 때의 한계: 원본 얼굴이 작거나 모호한 경우 얼굴 교체 결과가 불만족스러울 수 있음

윤리적 우려: 다른 사람의 물리적 외관을 변조하는 데 사용될 수 있는 윤리적 우려를 제기할 수 있음

응용

영화 및 비디오 편집: 배우 얼굴 교체, 특수 효과

실시간 스트리밍: 얼굴 필터, 가상 아바타

치료 목적: 얼굴 마비 환자의 기능 회복

보안 및 감시: 위장 얼굴의 식별

ReHiFace-S 다운로드

소스로부터 설치: huggingface.co/GuijiAI/ReHiFace-S

ReHiFace-S 오프라인 패키지: 다운로드1 / 다운로드2

모델 다운로드: 다운로드1 / 다운로드2

ReHiFace-S WebUI

ReHiFace-S 샘플

<출처: Hugging Face>

<출처: Hugging Face>