AI 보컬 Remix 도구 | Replay

무료 AI 보컬 Remix 도구 | Replay

<첫 실행 후 AI 데이터를 받는데 시간이 조금 걸린다>

이젠 좋아하는 노래 리믹스도 AI로

「간단한 보컬 반주 음원 분리 도구」에서 소개한 Spleeter, vocal-separate 도구가 음원에서 배경 음악과 보컬을 분리해 주는 AI 기술인 반면에 Replay는 원클릭으로 좋아하는 음악의 보컬을 Remix(혹은 변조) 하는 AI 도구이다.

Replay에 사용할 수 있는 AI RVC(Retrieval-based Voice Conversion) 모델은 weights에서 무료로 받을 수 있는데, BTS • 블랙핑크 등의 유명 가수, 짱구 • 드래곤볼 • 원신 등의 애니메이션/게임 캐릭터 등의 AI RVC 모델을 무료로 이용할 수 있고, 잘 찾아보면 윤석열 대통령 목소리도 있다는 것!!!

Replay 및 AI 모델 다운로드

Replay 다운로드(필수): https://www.tryreplay.io
└ Windows, MacOS, Linux

---

AI RVC 모델(선택): https://www.weights.gg

AI RVC 모델 다운로드

weights에서 받은 AI 모델 파일을,
C:\Users\xxxx\AppData\Roaming\Replay\com.replay.Replay\models
폴더에 압축 해제하고 Replay를 재시작하면 된다.

Replay, 어떻게 사용하냐고?

① 원하는 오디오/동영상 파일을 선택하고
② 리믹스에 사용할 AI 모델을 선택하고
③ [CREATE SONG]을 클릭하면 Remix 작업이 시작된다.

오늘 테스트에선 [Settings]에 있는 고급 설정은 건드리지 않고, 기본값을 그대로 사용해 리믹스했다.

백문이 불여일견이라고 Replay가 뭐 하는데 쓰는 물건인지는, 아래 리믹스 결과물을 들어보면 얼추 감이 잡힐 것이다.

영턱스클럽 - 정, 리믹스 AI 모델: Kanye West

이난영 - 알아달라우요, 리믹스 AI 모델: 로제(Rosé)

투투 - 그대 눈물까지도, 리믹스 AI 모델: 정국(Jung Kook Of BTS)

작업 팁!

생각만큼 뛰어나지 않다고 생각될 수도 있지만, 사용자가 변경할 수 있는 설정값도 꽤 있다는 것. 고로 Replay를 심도 있게 다루고 싶은 사람은 설정값 변화에 따라 무엇이 달라지는지 유심히 귀를 기울여야 할 것이다.

NVIDIA 사용자는 CUDA 가속을 사용할 수 있어 빠르게 리믹스 작업을 완성할 수 있지만, 그 밖의 사용자는 오직 CPU로만 렌더링해야 하는데, 다른 AI 기술처럼 시간이 꽤 잡아먹는다. Ryzen 3에선 한 곡 리믹스하는데 10~15분 정도 걸린다.

고로 저사양으로 작업하면서 이런저런 설정값들을 테스트해 보고자 할 땐 한 곡 전체를 리믹스하지 말고, ShanaEncoder 같은 인코딩 프로그램으로 보컬 부분 일부분만 잘라내어 리믹스해보면서 원하는 결과물에 근접한 지 조금씩 가늠해 보는 것을 추천.