AI 목소리 듣자마자 '기계 티' 나는 진짜 이유, 음성 복제 제대로 쓰는 법
지난달 쇼츠 하나에 더빙을 넣으면서, 내 목소리를 복제해둔 걸로 대사를 읽었어요. 친한 동료한테 미리 보내봤더니 답이 "이거 완전 AI 음성인데? 딱 듣으면 알겠는데" 였습니다.
솔직히 억울했어요. 내 목소리를 그대로 복제한 건데, 음색도 똑같은데 뭐가 어색하다는 걸까? 그래서 그 합성 음성이랑 제가 그냥 평소에 말하는 녹음을 나란히 놓고 몇 번씩 들어봤어요. 그제서야 알았습니다. 문제는 음색이 아니라... 제가 쓰는 방법이 틀렸던 거예요.
어색한 건 목소리가 아니라 '읽는 방식'
사람은 말할 때 숨을 쉬고, 멈추고, 가끔 말끝을 흐립니다. 강조할 부분에서는 살짝 끌고, 전환점 앞에서는 반 박자 쉬기도 하고요. 그런데 문단 전체를 통째로 TTS에 던져버리면? 처음부터 끝까지 같은 리듬으로 읽어버려요. 초등학생 암송하듯이.
그 뒤로 방식을 바꿨어요. 긴 문장은 짧게 끊고, 쉬어야 할 자리에 쉼표를 박아넣는 거죠. 예를 들어 '이 방법 진짜 좋아요'를 '이 방법, 진짜 좋아요'로. 쉼표 하나 차이인데 결과물이 완전히 달라집니다.
그리고 이거, 은근히 놓치는 분들이 많은데요. 문장부호가 곧 연출자예요. 물음표, 말줄임표, 대시... 이런 기호들이 합성되는 억양을 직접 바꿉니다. 사람이 쓴 것처럼 문장부호를 다듬어주면, 나오는 소리도 사람처럼 들립니다.
복제 소재 품질이 상한선을 결정합니다
두 번째 함정은 녹음 단계에 있었어요. 처음엔 그냥 휴대폰으로 삼십 초쯤 대충 녹음해서 올렸는데, 배경에 에어컨 소리, 한번은 창밖 경적소리까지 담겼거든요. 그러니 복제된 목소리가 뭔지 모르게 뿌옇더라고요.
그 후 조용한 방에서, 마이크와 주먹 하나 거리를 두고, 평소 말하는 세기로 일 분 정도 녹음해서 다시 올렸습니다. 효과가 바로 달라졌어요. 소재가 깨끗해야 모델이 배울 게 있는 거죠. 사진 찍는 거랑 똑같아요. 원본이 흔들렸으면 아무리 보정해도 소용없잖아요.
VoxClone 음성 복제 페이지에서는 소재만 올리면 바로 시작할 수 있어요. 가입 없이 음성 합성이 되는 구조라 이메일 입력도, 심사 기다림도 없고, 녹음 올리고 몇 분이면 바로 들어볼 수 있습니다.
텍스트 자체도 손봐야 합니다
TTS가 유독 못 읽는 것들이 있어요. 한자어 다음에 오는 한글의 발음 변화라든가, 영어 약어, 브랜드명 같은 것들요. 이런 경우엔 억지로 늘어지지 말고 텍스트를 고치세요. 'APP'이 이상하게 읽히면 '에이-피-피'로 적어주고, 이름 발음이 이상하면 표기를 바꾸는 식으로요.
요즘 제 습관은 이거예요. 합성 전에 원고를 제가 한 번 직접 읽어보는 겁니다. 제 입으로 읽어도 어색한 문장은 AI는 더 어색하게 읽어요. 이 단계에 2분 쓰면 나중에 재합성하며 날릴 10분을 아낄 수 있습니다.
그리고 콘텐츠 양이 많아서 대본 더빙을 대량으로 해야 하는 분이라면, 굳이 목소리를 복제 안 하고 온라인 텍스트 음성 변환 기본 음성만 써도 내레이션용으로 충분합니다. AI 더빙 무료로 쓸 수 있다는 점도 부담이 없고요.
자주 묻는 질문
내 목소리 복제하려면 녹음을 얼마나 해야 하나요?
보통 깨끗한 녹음 1분 정도면 충분해요. 핵심은 조용한 환경과 일정한 음량이지, 길이가 아니에요. 소음 섞인 5분 녹음보다 깨끗한 1분이 훨씬 낫습니다.
무료 음성 복제, 진짜 공짜인가요? 몇 번 쓰다가 결제 요구하던데요.
VoxClone은 제가 꽤 오래 쓰고 있는데 복제든 합성이든 무료 TTS로 제공되고, 계정 가입도 요구받은 적 없어요. 페이지 열면 바로 쓰는 구조입니다. 물론 정책이 앞으로 어떻게 될지는 아무도 모르니, 지금 쓸 수 있을 때 쓰는 게 맞죠.
합성한 음성 상업적으로 써도 되나요?
자기 목소리를 복제했거나, 상대방 동의를 받은 목소리라면 대체로 문제없습니다. 반면 남의 목소리를 몰래 가져다 쓰는 건 선을 넘는 거예요. 도구는 중립적이니, 출처와 용도는 사용 전에 스스로 정리하고 시작하세요.
마치며
음성 합성 결과물이 자연스러운지 아닌지는, 70%는 쓰는 사람 손에 달려 있고 30%만 도구 탓이에요. 소재를 깨끗하게, 원고는 구어체로, 문장부호는 연출 도구로. 이 세 가지만 지켜도 무료 도구 결과물로 대부분의 귀를 속일 수 있습니다.
합성 음성이 너무 어색해서 고민이라면, 지금 바로 조용한 방에서 1분짜리 깨끗한 목소리를 녹음해서 무료 음성 복제 페이지에 올려보세요. 그리고 위에서 말한 대로 문장을 쪼개서 다시 합성해보고, 전후 차이를 직접 비교해보시길. 제가 겪은 시행착오나 오디오북 음성 만들기 같은 튜토리얼은 동적 목록에 틈틈이 올리고 있으니 놀러 오세요.