구글 노트북LM 한국어 목소리 바꾸기 완벽 가이드 (feat. 일레븐랩스 & 무료 RVC 코랩)

2026. 2. 26.

 

최근 구글의 AI 노트 서비스인 노트북LM(NotebookLM)이 큰 인기를 끌고 있습니다. 특히 내가 올린 문서를 바탕으로 두 명의 AI가 라디오 팟캐스트처럼 대화를 나누는 '오디오 개요(Audio Overview)' 기능은 혁신적이라는 평가를 받고 있죠.

 

하지만 한국어로 이 기능을 사용할 때 한 가지 아쉬운 점이 있습니다. 바로 "내 마음대로 목소리를 고를 수 없다"는 것입니다.

 

오늘은 노트북LM의 한계를 극복하고, 생성된 오디오를 내가 원하는 매력적인 한국어 목소리로 바꾸는 두 가지 확실한 방법을 소개해 드리겠습니다. 초보자를 위한 유료/무료(일레븐랩스) 방법부터, 완전 무료로 무제한 사용할 수 있는 구글 코랩(RVC) 활용법까지 모두 담았습니다!


💡 1. 구글 노트북LM, 한국어 음성은 몇 종류일까?

현재 노트북LM 자체에서는 사용자가 직접 음성의 톤, 연령, 성별 등을 고를 수 있는 커스텀 기능을 제공하지 않습니다. 선택하는 포맷에 따라 구글이 고정해 둔 AI 음성이 자동으로 배정됩니다.

  • 심층 대화(팟캐스트 형식): 남성 1명, 여성 1명 (총 2종류 고정)
  • 짧은 요약(브리핑 형식): 단일 화자 음성 1종류 고정

만약 이 기본 목소리가 너무 딱딱하거나, 내 영상(유튜브 쇼츠, 틱톡 등)의 분위기와 맞지 않는다면 외부 AI 음성 변환(Voice Changer) 툴을 사용해야 합니다.

 

이때 텍스트를 다시 입력하는 TTS 방식이 아니라, 원본 오디오의 호흡과 감정은 유지한 채 목소리만 덮어씌우는 'STS(Speech-to-Speech)' 방식을 사용해야 자연스럽습니다.


🚀 2. 쉽고 완벽한 퀄리티! '일레븐랩스(ElevenLabs)' 활용법

가장 추천하는 방법은 전 세계 1위 AI 음성 플랫폼인 일레븐랩스를 사용하는 것입니다. 윈도우 PC에 프로그램 설치 없이 웹 브라우저에서 바로 작업이 가능합니다.

📌 일레븐랩스 5단계 사용법

  1. 오디오 다운로드: 노트북LM에서 오디오 개요(팟캐스트)를 생성한 뒤, 우측 상단 메뉴를 눌러 파일(.wav)을 PC로 다운로드합니다.
  2. 일레븐랩스 접속: 홈페이지(elevenlabs.io)에 접속하여 구글 계정 등으로 가입 및 로그인합니다.
  3. 메뉴 선택: 화면에서 'Text to Speech'가 아닌 [Speech to Speech] 탭을 클릭합니다.
  4. 파일 업로드 및 목소리 설정:
    • 노트북LM에서 다운받은 오디오를 끌어다 놓습니다.
    • 원하는 한국어 목소리 성우를 선택합니다.
    • (중요) 하단의 AI 모델이 반드시 'Eleven Multilingual v2' (다국어 지원)로 되어 있는지 확인하세요.
  5. 생성 및 저장: [Generate(생성)] 버튼을 누르면, 대화의 느낌은 그대로 살아있으면서 목소리만 바뀐 고품질 오디오가 완성됩니다. 들어보고 [다운로드] 하시면 됩니다.

💰 비용은 어떻게 되나요?

  • 무료(Free): 매월 약 10,000자 크레딧 제공 (약 10분 분량). 상업적 이용은 불가능하지만 테스트용으로 좋습니다.
  • 스타터($5/월): 약 30분 분량 제공, 유튜브 등 상업적 이용 가능.
  • (노트북LM 오디오가 길다면, 클립챔프 같은 무료 편집기로 테스트할 구간만 잘라서 올려보시는 것을 추천합니다.)

🔥 3. 완전 무료 & 무제한! '구글 코랩 + RVC' 활용법

"매월 결제하는 건 부담스럽고, 긴 팟캐스트를 무제한으로 바꾸고 싶어요!" 하시는 분들도 계실 겁니다.

 

내 PC에 RVC(Retrieval-based Voice Conversion)라는 무료 오픈소스 AI를 깔면 되지만, 외장 그래픽카드(NVIDIA GPU)가 없는 일반 사무용 노트북(내장 CPU)으로 5분짜리 오디오를 변환하려면 30분~2시간이 걸리고 엄청난 발열이 발생합니다.

 

그래서 내 PC 대신 구글의 슈퍼컴퓨터를 무료로 빌려 쓰는 '구글 코랩(Google Colab)'을 강력히 추천합니다!

📌 RVC 구글 코랩 실전 가이드 (Applio 기준)

(※ 미리 인터넷에서 적용하고 싶은 AI 한국어 목소리 모델(.pth, .index)을 다운로드해 두세요!)

  1. 코랩 접속 및 GPU 켜기:
    • 구글에 'Applio Colab'을 검색하여 깃허브 등에 공유된 코랩 링크로 들어갑니다.
    • 상단 메뉴 [런타임] ➡ [런타임 유형 변경]에서 하드웨어 가속기를 [T4 GPU]로 선택 후 저장합니다.
  2. 코드 실행하기:
    • 화면에 보이는 회색 코드 박스들의 [재생(▶)] 버튼을 위에서부터 순서대로 누릅니다.
    • 마지막 단계가 완료되면 결과창 맨 아래에 파란색 인터넷 링크(URL)가 뜹니다. 클릭해 주세요.
  3. 목소리 모델 불러오기:
    • 새 창으로 Applio 웹 화면이 열립니다. [Download] 탭으로 가서 미리 준비한 목소리 모델 파일(.pth)을 업로드합니다.
  4. 노트북LM 오디오 업로드 및 세팅:
    • 메인 화면인 [Inference(변환)] 탭으로 이동합니다.
    • 불러온 목소리를 선택하고, 노트북LM 원본 오디오를 업로드합니다.
    • ⭐ 핵심 설정:
      • Pitch (음정): 원본이 여잔데 남자로 바꾸면 -12 / 원본이 남잔데 여자로 바꾸면 +12 / 동성이면 0
      • F0 Method: 고음질인 rmvpe 선택 (코랩은 성능이 좋아 금방 됩니다!)
  5. 변환 및 다운로드:
    • 하단의 [Convert] 버튼을 누릅니다. 5분짜리 긴 음성도 구글 GPU 덕분에 1~2분이면 뚝딱 바뀝니다. 완료 후 플레이어 우측 하단 점 3개를 눌러 다운로드하면 끝!

(🚨 주의: 코랩 창을 닫으면 작업 내역이 날아가므로 완료된 파일은 꼭 바로 다운로드하세요!)


📝 요약: 나에게 맞는 방법은?

  • ⏱️ 돈이 조금 들더라도 빠르고 스트레스 없이 고퀄리티를 원한다면?일레븐랩스 (ElevenLabs)
  • 💻 복잡한 건 싫고 내 PC 사양이 최신형 게이밍 PC(엔비디아 GPU)라면?Applio 윈도우 버전 설치
  • 🤑 내 PC 사양은 낮지만, 완전 무료로 무제한 변환을 하고 싶다면?구글 코랩 + RVC

구글 노트북LM의 스마트한 요약 기능에 매력적인 나만의 AI 목소리를 더해, 멋진 팟캐스트 영상이나 오디오북 콘텐츠를 제작해 보시길 바랍니다!




댓글