한국어 STT 정확도 실측: 클로바 음성인식 vs 일레븐랩스 Scribe, 같은 오디오 24번 돌린 결과

네이버 클로바 음성인식(CSR)과 일레븐랩스 Scribe v1·v2에 같은 한국어 오디오 8개를 넣고 문자 오류율(CER)을 쟀습니다. 순수 한국어는 사실상 동률, 영어 혼용에서 4배 차이가 났습니다. 원자료 공개.

안녕하세요, Sonetho입니다. ⚡

 

"한국어 음성인식은 역시 네이버가 낫지 않나?"
많이 듣는 말인데, 실제로 재본 사람은 드뭅니다.
그래서 직접 쟀습니다.
같은 한국어 오디오 8개를 세 엔진에 넣고, 정답 대본과 글자 단위로 대조했습니다.

 

📊 결과 요약 (문자 오류율 CER, 낮을수록 정확)

부문클로바 CSRScribe v1Scribe v2
감정 대사3.2%1.1%1.1%
뉴스체 낭독0~0.8%0~0.8%0~0.8%
영어·숫자 혼용36.9~37.7%8.5~13.8%8.5~20.8%
장문 일관성1.7~7.3%0%0%
평균11.4%3.2%4.0%

 

먼저 클로바 편을 들자면.
순수 한국어에서는 CSR도 사실상 만점입니다.
뉴스체 낭독은 세 엔진 모두 0%대로 동률이었습니다.
이 구간만 보면 뭘 써도 됩니다.

 

🔬 구간별 전체 측정치 (8회)

요약표는 범위로 묶었으니, 8회를 전부 펼쳐 둡니다.
같은 대본을 두 목소리로 합성해 각각 넣었습니다.

 

부문소스 목소리클로바 CSRScribe v1Scribe v2
감정 대사클로바 아라3.2%1.1%1.1%
감정 대사일레븐랩스 Hyuk3.2%1.1%1.1%
뉴스체 낭독클로바 아라0%0%0%
뉴스체 낭독일레븐랩스 Hyuk0.8%0.8%0.8%
영어·숫자 혼용클로바 아라36.9%13.8%20.8%
영어·숫자 혼용일레븐랩스 Hyuk37.7%8.5%8.5%
장문 일관성클로바 아라7.3%0%0%
장문 일관성일레븐랩스 Hyuk1.7%0%0%

 

💥 승부처는 영어 혼용이었습니다

한국어 문장에 브랜드명과 숫자가 섞이는 순간 격차가 벌어졌습니다.
CSR의 실제 출력 몇 개를 그대로 옮깁니다.

 

정답클로바 CSR 출력
ChatGPT"채취 pt"
Gemini"나재민이", "개 미니"
일레븐랩스"11 x"
약 15달러 수준"약 시부터 여수 중"

 

유튜브 자막, IT 콘텐츠, 요즘 회의록처럼 영어 단어가 섞이는 오디오라면 이 차이가 그대로 작업량이 됩니다.
Scribe는 같은 구간에서 ChatGPT, Gemini, API를 전부 원형 그대로 보존했습니다.

 

🎧 넣은 오디오와 전사문 전문

수치만 보면 감이 안 옵니다.
영어 혼용 구간에 실제로 넣은 오디오를 그대로 올립니다.
들으면서 아래 전사문을 비교해 보세요.

 

클로바 아라가 읽은 오디오

 

정답 대본
일레븐랩스의 Creator 플랜은 월 22달러지만, 첫 달은 50% 할인된 11달러에 시작할 수 있습니다. ChatGPT나 Gemini 같은 AI 툴과 연동하면 활용 폭이 넓어지고, 2026년 7월 기준 API 요금은 100만 자당 약 15달러 수준입니다. 자세한 내용은 sonetho.com에서 확인하세요.

 

클로바 CSR (오류율 36.9%)
11 x의 크리에이터 플랜은 월 22 달라지는 첫달은 50% 할인된 11달러에 시작할 수 있습니다 채취 pt 나재민이 같은 ai 툴과 연동 하면 활용 폭이 넓어지고 2026년 7월 기준 api 요금은 100만장 약 시부터 여수 중입니다 자세한 내용은 선 투 닷컴에서 확인하세요

 

Scribe v1 (오류율 13.8%)
일레븐웹스의 크리에이터 플랜은 월 $22지만 첫 달은 50% 할인된 $11에 시작할 수 있습니다. ChatGPT나 Gemini 같은 AI 툴과 연동하면 활용 폭이 넓어지고 2026년 7월 기준 API 요금은 100만 자당 약 $15 수준입니다. 자세한 내용은 son토.com에서 확인하세요.

 

Scribe v2 (오류율 20.8%)
일레븐랩스의 크리에이터 플랜은 월 22달러지만 첫 달은 50% 할인된 11달러에 시작할 수 있습니다. 챗GPT나 제미니 같은 AI 툴과 연동하면 활용 폭이 넓어지고 2026년 7월 기준 API 요금은 100만 자당 약 15달러 수준입니다. 자세한 내용은 소토닷컴에서 확인하세요.

 

여기서 짚어둘 게 있습니다.
v2가 v1보다 점수는 나쁜데, 사실 더 잘 알아들었습니다.
v1은 브랜드명을 "일레븐웹스"로 틀렸고 v2는 "일레븐랩스"로 맞혔습니다.
금액도 v1은 $22로 기호 변환했고 v2는 "22달러"로 원문 그대로 적었습니다.
그런데 v2는 ChatGPT를 "챗GPT", Gemini를 "제미니"로 한글 음차했습니다.
글자 단위 채점(CER)에서는 그게 전부 오류로 잡혀 20.8%가 됐습니다.
점수만 보고 v1이 낫다고 결론내면 틀립니다.

 

🎙️ 같은 문장인데 목소리에 따라 오류율이 4배

예상 못 한 결과가 하나 있었습니다.
장문 구간은 대본이 완전히 같습니다.
그런데 클로바 목소리로 읽은 오디오에서는 CSR 오류율이 7.3%, 일레븐랩스 목소리로 읽은 쪽은 1.7%였습니다.
인식기가 아니라 읽어준 목소리 때문에 4배가 갈렸습니다.
Scribe는 같은 두 오디오에서 모두 0%였습니다.

 

클로바 아라가 읽은 장문

 

일레븐랩스 Hyuk이 읽은 장문

 

무너진 지점은 문장 끝이었습니다.
정답은 "어제보다 오늘 더 자연스러워지고 있다는 것만은 분명합니다"입니다.
클로바 목소리 쪽에서 CSR은 이걸 "있다는것만 있는 영화"로 적었습니다.
같은 자리에서 일레븐랩스 목소리 쪽 CSR은 "있다는것만은 분명합니다"로 정확히 받았습니다.
중간에 "근본적으로 바꾸고 있습니다"의 "있습니다"도 클로바 목소리 쪽에서만 통째로 빠졌습니다.

 

실무에서 뜻하는 바는 이렇습니다.
STT 정확도를 잴 때 인식 엔진만 바꿔 보면 반쪽입니다.
입력 오디오의 발음과 호흡이 결과를 그만큼 흔듭니다.
사내 도구를 고를 때는 실제로 쓸 화자의 목소리로 재보셔야 합니다.

 

🧐 Scribe도 완벽하지는 않았습니다

정직하게 Scribe의 오류도 공개합니다.
처음 보는 고유명사에 약합니다.
"sonetho.com"을 "sonto.com"으로 적었고, 한 샘플에서는 "11달러"를 "1달러"로 잘못 들었습니다.
숫자가 돈과 직결되는 문서라면 어느 엔진이든 검수는 필수입니다.

 

v1과 v2의 차이도 흥미로웠습니다.
v2는 "22달러"를 "$22"로 알아서 표기 정규화합니다.
저희 채점 방식(CER)에서는 오류로 집계되지만 의미는 정확한 출력입니다.
표기 원형이 중요하면 v1, 읽기 좋은 자막·문서가 목적이면 v2가 맞습니다.
v2는 실시간 스트리밍 버전도 있습니다.

 

💰 요금은 어떻게 다른가

일레븐랩스 Scribe: 시간당 $0.22 (배치 기준).
무료 플랜에도 월 4.5시간이 포함됩니다.
$6 Starter는 27시간, $22 Creator는 100시간 포함이라 웬만한 개인 작업은 플랜 안에서 끝납니다.

 

클로바 음성인식(CSR): 15초 단위로 올림 계산되는 종량제입니다.
정확한 단가는 네이버클라우드 요금계산기에서 확인하세요.
참고로 CSR은 짧은 발화용 API라 60초 제한이 있습니다.
긴 녹음과 화자 분리가 필요하면 별도 상품인 CLOVA Speech를 써야 합니다.

 

🤔 그래서 뭘 쓰면 되나

클로바 CSR이 맞는 경우
순수 한국어 위주의 짧은 발화 처리.
국내 클라우드 인프라 요건이 있는 프로젝트.
네이버클라우드 생태계를 이미 쓰고 있는 팀.

 

일레븐랩스 Scribe가 맞는 경우
영어와 한국어가 섞이는 콘텐츠 자막·회의록.
브랜드명이 자주 나오는 IT·마케팅 오디오.
무료 4.5시간으로 일단 품질을 직접 확인해 보고 결정할 수 있습니다.

 

ElevenLabs Scribe 무료로 시작하기 →

 

🧪 측정 방법 (재현 가능)

대본 4부문(감정 대사, 뉴스체, 영어·숫자 혼용, 장문)을 고품질 TTS 두 종(클로바 아라 Pro, 일레븐랩스 Hyuk)으로 합성해 오디오 8개를 만들었습니다.
각 오디오를 세 엔진에 넣어 정답 대본과 글자 단위로 대조(CER)했습니다.
한계도 밝힙니다.
입력이 TTS 합성음이라 잡음 없는 이상적 조건이고, 실제 사람 발화나 소음 환경에서는 수치가 달라질 수 있습니다.
일부 오류는 TTS의 발음에서 비롯됐을 가능성도 있습니다.

 

❓ 자주 묻는 질문 (FAQ)

Q. 한국어 STT는 뭐가 제일 정확한가요?
이번 실측에서는 평균 문자 오류율 기준 Scribe v1이 3.2%로 가장 낮았습니다.
다만 순수 한국어 격식체에서는 클로바 CSR도 0%대로 동률이라, 오디오에 영어가 섞이는지가 선택 기준입니다.

 

Q. 클로바 음성인식(CSR)과 CLOVA Speech는 뭐가 다른가요?
CSR은 60초 이하 짧은 발화용 API이고, CLOVA Speech는 긴 녹음 파일과 화자 분리를 지원하는 별도 상품입니다.
이번 테스트는 CSR 기준입니다.

 

Q. Scribe v1과 v2 중 뭘 쓰나요?
표기 원형 보존이 중요하면 v1, 통화 기호 같은 표기를 알아서 정리한 읽기 좋은 출력이 목적이면 v2입니다.
v2는 실시간 스트리밍(시간당 $0.39)도 지원합니다.

 

인터뷰 전사와 화자 분리 실전은 ElevenLabs vs Whisper vs Deepgram STT 비교에서 이어집니다.
다음 글에서 또 만나요. Sonetho였습니다. ⚡