영상 제작자라면 공감하실 겁니다.
대본 수정할 때마다 성우님 스케줄 맞추고, 컨디션 눈치 보고, 비용 깨지고...
"그냥 내가 읽고 말지" 싶다가도 내 목소리는 별로라 포기하셨죠?
작년에 제가 '일레븐랩스'를 만나고 그 스트레스에서 완전히 해방되었습니다.
안녕하세요, Sonetho입니다. ⚡
오늘은 많은 분들이 가장 궁금해하시는 '내 목소리 복제(Voice Cloning)'의 모든 것을 털어놓으려 합니다.
제가 직접 내돈내산으로 Creator 플랜을 결제하고 PVC(Professional Voice Clone)를 만들어본 경험,
그리고 "돈 날리지 않는 팁"까지 싹 다 정리해 드립니다.
1. 주의! Starter 플랜은 '고퀄의 내 목소리' 못 만듭니다
가장 많이 하는 실수가 "일단 싼 거(Starter) 써봐야지" 하고 덜컥 결제했다가 낭패를 보는 경우입니다.
제가 그랬거든요... ㅋㅋ (경험담입니다 😭)
📊 클로닝 종류와 차이점 (필독)
- Instant Voice Cloning (인스턴트):
- 특징: 10초 녹음 파일만 있으면 즉시 복제됨.
- 용도: 내 목소리보다는 다른 캐릭터/인물 흉내 낼 때 사용.
- 가능 플랜: Starter ($5) 이상 가능.

- Professional Voice Clone (PVC):
- 특징: AI가 내 목소리를 딥러닝합니다. (30분~3시간 데이터 필요)
- 퀄리티: 미쳤습니다. 숨소리, 톤, 억양까지 완벽하게 카피합니다.
- 제약: 본인 목소리 인증 절차가 있어서 남의 목소리는 못 만듭니다.
- 가능 플랜: Creator ($22) 이상부터 가능!
💡 꿀팁: PVC를 여러 개 만들고 싶다고 Business 플랜($1320/월) 쓰는 사람 없죠...?
차라리 Creator 계정을 여러 개 만드세요~
2. 실패 없는 'PVC 녹음' 노하우 (홈 레코딩 편)
PVC는 내가 넣어준 데이터를 '그대로' 학습합니다.
잡음이 들어가면 잡음까지 학습하고, 발음이 뭉개지면 뭉개진 대로 배웁니다.
"좋은 입력이 좋은 출력을 만듭니다 (High-quality input = high-quality output)."
🎤 공식 가이드 + 에디터 실전 팁
1. 톤앤매너 통일 (매우 중요)
데이터를 넣을 때 웃는 톤, 화난 톤, 뉴스 톤 등의 여러 톤들을 섞지 마세요.
차라리 '차분한 내레이션용', '밝은 광고용' 이렇게 용도별로 따로 녹음해서 만들어야 결과물이 훨씬 안정적입니다.
2. 방구석 레코딩 꿀팁 (장비가 없다면?)
- 장소: 울림이 없는 곳이 최고입니다. 옷이 꽉 찬 '옷장' 안에서 녹음해 보세요. (흡음 효과 최고)
- 마이크: 전문 마이크 장비(콘덴서, 다이나믹 뭐든 좋음)가 좋지만, 없다면 스마트폰도 괜찮습니다. 단!
- 🚨 휴지 2장의 마법: 스마트폰 마이크에 입바람(팝노이즈)이 퍽퍽 들어가지 않게,
휴지 2~3 장을 겹쳐서 마이크 부분을 살짝 덮고 녹음하세요. 'ㅍ', 'ㅃ'발음의 파열음이 확 줄어듭니다. - 위치 : 마이크를 입에서 약간 떨어뜨리고, 입술 정면이 아닌 약간 옆으로 비스듬이 향하게 하여 공기가 직접 부딪히지 않게 하세요.
3. 공식 권장 스펙 (Official Guide)
- 시간: 최소 30분 이상 (권장 2시간 이상)
- 마이크 거리: 주먹 두 개 정도 거리 유지 (약 15~20cm)
- 볼륨: 너무 작거나 찢어지지 않게 일정하게 (-23dB ~ -18dB RMS 권장)
🤔 잠깐! 녹음할 때 '아무 책'이나 읽으시려고요?
AI 성능은 '어떤 대본'을 읽히느냐에 따라 천차만별입니다.
발음 삑사리를 잡고 퀄리티를 200% 올려주는 'AI 학습 전용 대본'을 준비했으니, 이걸 보고 읽으세요.
❓ 자주 묻는 질문 (FAQ)
Q1. 10초만 녹음하면 내 목소리가 복제되나요?
A. 10초로 되는 것은 인스턴트 클로닝(Instant Voice Cloning)입니다.
다만 이 방식은 내 목소리를 정교하게 살리기보다 다른 캐릭터나 인물을 흉내 낼 때 쓰는 쪽에 가깝습니다.
숨소리와 억양까지 옮기는 고품질 복제는 PVC이고, 30분에서 3시간 분량의 데이터가 필요합니다.
Q2. Starter 플랜으로 내 목소리 복제가 되나요?
A. 인스턴트 클로닝은 Starter($5) 이상이면 가능합니다.
고품질 복제인 PVC(Professional Voice Clone)는 Creator($22) 이상부터 열립니다.
싼 플랜부터 결제했다가 PVC를 못 써서 낭패를 보는 경우가 가장 흔한 실수입니다.
Q3. PVC는 남의 목소리로도 만들 수 있나요?
A. 만들 수 없습니다.
PVC에는 본인 목소리 인증 절차가 있습니다.
그래서 다른 사람의 목소리를 학습시키는 용도로는 쓸 수 없습니다.
Q4. 마이크 장비가 없어도 괜찮은가요?
A. 스마트폰으로도 됩니다.
대신 팝노이즈를 잡아야 합니다.
휴지를 두세 장 겹쳐 마이크 부분을 살짝 덮고 녹음하면 'ㅍ'과 'ㅃ' 같은 파열음이 확 줄어듭니다.
마이크를 입 정면이 아니라 약간 비스듬히 두고, 옷이 꽉 찬 옷장 안처럼 울림이 없는 곳에서 녹음하세요.
Q5. 공식 권장 녹음 스펙은 어떻게 되나요?
A. 시간은 최소 30분 이상이고 2시간 이상을 권장합니다.
마이크 거리는 주먹 두 개 정도, 약 15~20cm를 유지합니다.
볼륨은 너무 작거나 찢어지지 않게 -23dB에서 -18dB RMS 사이로 일정하게 잡습니다.
Q6. 여러 톤의 목소리를 한 번에 학습시켜도 되나요?
A. 섞지 마세요.
웃는 톤, 화난 톤, 뉴스 톤을 한 데이터에 넣으면 결과가 흔들립니다.
차분한 내레이션용과 밝은 광고용처럼 용도별로 따로 녹음해 각각 만드는 편이 훨씬 안정적입니다.
🎁 일단 '찍먹'부터 해보즈아~
PVC(Creator 플랜)가 부담스럽다면, Starter 플랜(월 $1~5)으로 Instant Cloning(인스턴트 복제)부터 체험해 보세요.
내 목소리 1분만 녹음해서 넣으면, AI가 바로 따라 하는 걸 볼 수 있습니다.
"맨땅에 헤딩하며 얻은 30시간의 시행착오를 5분 만에 요약해 드렸습니다.
이 정보가 유익했다면, 위 링크를 통해 시작해 주세요...!
저희가 더 깊은 AI 실험을 지속하는 원동력이 됩니다! 🧪"
다음 글에서는 "유튜브 쇼츠, 목소리만 바꿔도 떡상한다 (브랜딩 편)"으로 찾아 뵙겠습니다!
Sonetho였습니다! ⚡