생성형 AI Fundamentals
Session 9 · 음악·음성 생성 도구·플랫폼
생성형 AI Fundamentals

음악·음성 생성 도구·플랫폼
화면에서 소리로 — 선택 프레임

Session 9 · 심화 트랙

두 갈래(음악·음성) · 폐쇄형 vs 오픈소스 · 오디오 고유 점검 축 · 비교 매트릭스 2종 · 네 질문 선택 프레임

🎨 이미지 프롬프트: "Editorial illustration on dark navy #1a1a2e background. On the left a dim monitor showing a picture fades out; on the right a bright speaker emits sound waves that split into two paths — the upper path becomes a musical staff labeled 'Music', the lower path becomes a speech waveform labeled 'Voice'. One short caption at top reads 'Screen to Sound'. Exactly three text labels: 'Screen to Sound', 'Music', 'Voice'. Thin luminous line-art, teal #00b894 and purple #6c5ce7 accents, 16:9. CRITICAL: All visible text MUST be in English ONLY (no Korean characters). Each label appears EXACTLY ONCE — short labels only, no paragraph text, keep everything inside the frame. No mirrored or reversed text."

LLM은 어떻게 '생각하는 척'하는가 — 동작 원리부터 이미지·영상 생성, 다가오는 시대까지
PART 1

PART 1

도입 — 소리를 짓는 두 갈래

화면에서 소리로 · 음악 vs 음성 · 도구당 한 장, 여섯 칸 + 오디오 축.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

두 갈래를 가른다 — 음악 vs 음성

오디오 생성은 겉으로는 한 덩어리처럼 보이지만, 실무에서는 두 갈래로 뚜렷하게 구분된다. 이 구분이 오늘의 골격이다. 둘은 쓰임도, 핵심 급소도 다르다.

🎵 음악 (music) — 급소는 저작권

멜로디·화성·리듬에, 필요하면 가사와 보컬까지 결합해 한 곡의 음악을 생성한다. 프롬프트 한 줄로 완성곡을 출력하는 서비스다. 학습에 사용된 원곡과 생성된 곡의 권리 귀속은 현재도 법정에서 쟁점이 되고 있다.

🗣️ 음성 (voice) — 급소는 동의

글자를 사람 목소리로 낭독(TTS)하고, 특정 목소리를 복제(보이스 클론)하며, 다른 언어로 더빙한다. 음악이 아니라 발화다. 타인의 목소리를 무단으로 복제하면 사칭·사기로 이어진다.

🎨 이미지 프롬프트: "Editorial illustration on dark navy #1a1a2e background. At the top a single node labeled 'Audio' splits into two diverging roads. The left road leads to a card labeled 'Music' with a small copyright symbol; the right road leads to a card labeled 'Voice' with a small padlock. Exactly three text labels: 'Audio', 'Music', 'Voice'. The left road glows teal, the right road glows purple. Thin line-art, teal #00b894 and purple #6c5ce7 accents, 16:9. CRITICAL: All visible text MUST be in English ONLY (no Korean characters). Each label appears EXACTLY ONCE — short labels only, no paragraph text, keep inside the frame. No mirrored or reversed text."

📌 그래서 오늘은 두 갈래를 섞지 않고 나눠 다룬다. 먼저 음악(저작권이 급소), 다음 음성(동의가 급소). 이 두 급소는 뒤의 도구 슬라이드마다 반복해서 등장한다.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

🎨 Editorial illustration on dark navy #1a1a2e ba…

두 갈래를 가른다 — 음악 vs 음성

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

이 세션을 읽는 법 — 여섯 칸 + 오디오 축

도구 하나를 한 장으로 본다. 그 한 장은 항상 같은 여섯 칸으로 구성된다. 이 격자를 먼저 익히면, 이후 등장하는 도구가 전부 동일한 틀로 읽힌다.

🧩 여섯 칸

  1. 화면 캡처 — 실제로 어떻게 생겼나
  2. 한 줄 소개 — 한 문장으로 하면
  3. 강점 — 무엇을 제일 잘하나
  4. 한계 — 무엇이 약하거나 불편한가
  5. 가격 모델 — 무료·유료 구독·오픈소스
  6. 언제 쓰나 — 어떤 상황에서 고르나

🎨 이미지 프롬프트: "Editorial illustration on dark navy #1a1a2e background showing an empty slide template. A large panel on the left labeled 'Screenshot'. On the right, five small stacked cards labeled top to bottom: 'Identity', 'Strength', 'Limit', 'Price', 'When'. Along the bottom edge sit five small round badges labeled 'Length', 'Rights', 'Consent', 'Watermark', 'Language'. Thin line-art, teal #00b894 left panel and purple #6c5ce7 right cards, 16:9. CRITICAL: All visible text MUST be in English ONLY (no Korean characters). Each label appears EXACTLY ONCE — short labels only, no paragraph text, keep inside the frame. No mirrored or reversed text."

⚠️ 오디오에는 이미지·영상에 없던 고유의 축이 더 붙는다 — 길이(클립인가 완성곡인가)·상업이용/저작권(팔아도 되나)·보이스 클론 동의(누구 목소리인가)·워터마크(AI 표식이 박히나)·언어(내 언어가 되나). 그림보다 이 축들이 선택을 더 크게 가른다.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

🎨 Editorial illustration on dark navy #1a1a2e ba…

이 세션을 읽는 법 — 여섯 칸 + 오디오 축

PART 2

PART 2

원리에서 제품으로 — 한 장 다리

음성은 텍스트 쌍, 음악은 태그 쌍 → "원리는 하나, 갈래는 둘, 제품은 여럿".

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

글이 소리를 부른다 — 제품의 갈래

오늘 다룰 도구가 어떻게 소리를 생성하는지, 그 원리를 한 문장으로 짚는다. 기본 구조는 이미지·영상 생성과 동일하다 — 설명이 붙은 대량의 데이터에서 패턴을 학습하고, 입력받은 프롬프트를 조건으로 삼아 소리를 생성한다.

🗣️ 음성 — 텍스트 쌍으로 학습

음성과, 그 음성을 전사한 텍스트의 쌍으로 학습했다. 새 문장을 입력하면 대응되는 파형을 생성해 음성으로 출력한다. 보이스 클론은 특정 화자의 짧은 녹음을 조건으로 그 목소리의 특성을 재현하는 것 — 이해가 아니라 통계적 특징의 재현이다.

🎵 음악 — 태그 쌍으로 학습

음악과, 그 곡을 묘사한 설명(태그)의 쌍으로 학습했다. "잔잔한 어쿠스틱 기타, 느린 템포" 같은 태그를 입력하면 그 설명에 부합하는 음악을 생성하고, 가사를 함께 넣으면 보컬까지 합성한다.

🎨 이미지 프롬프트: "Editorial illustration on dark navy #1a1a2e background showing a tree. One single root at the bottom labeled 'One principle'. From it two thick branches rise: the left branch ends in a small musical note above a tag labeled 'Music', the right branch ends in a small microphone above a tag labeled 'Voice'. Each branch tip further splits into several tiny app icons. Exactly three text labels: 'One principle', 'Music', 'Voice'. Thin line-art, teal #00b894 root and purple #6c5ce7 branches, 16:9. CRITICAL: All visible text MUST be in English ONLY (no Korean characters). Each label appears EXACTLY ONCE — short labels only, no paragraph text, keep inside the frame. No mirrored or reversed text."

📌 원리는 같아도 제품은 다르다. 어떤 데이터로 학습했나(그 데이터의 권리는 정리됐나), 노래를 짓나 목소리를 짓나, 어떤 화면으로 감쌌나, 상업이용과 동의를 어떻게 다루나 — 이 제품 차원의 선택이 도구를 가른다.

📖 참고: 오디오 생성의 원리(TTS·태그 붙은 오디오·확률적 복원)는 코어의 멀티모달 원리 세션에서 다룬다. 이 슬라이드는 그 원리의 한 줄 회수에 그친다.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

🎨 Editorial illustration on dark navy #1a1a2e ba…

글이 소리를 부른다 — 제품의 갈래

PART 3

PART 3

음악 생성 도구 — 쓸모마다 다른 대표

Suno(완성곡) · Udio(라이선스 전환) · Lyria(워터마크) · Stable Audio(권리정리·제작) · MusicGen(오픈·비상업).

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

Suno — 완성곡을 짓는 대표 주자 (v5.5)

Suno 가격 페이지

🧭 한 줄 소개

프롬프트 한 줄과 노랫말로 보컬 있는 완성곡을 짓는 음악 생성 서비스.

✅ 강점

완성도와 손쉬움. 반주만이 아니라 노랫말 붙은 보컬 곡을 몇 줄로 뽑는다. 장르 폭이 넓고 가사 편집·스템 분리 등 제작 편의가 붙는다.

⚠️ 한계

저작권 이슈가 첨예하다. 대형 음반사 소송이 진행 중이고, 약관도 유료 요금제에 상업권을 부여하되 "결과물에 저작권 성립을 보증하지 않는다"고 명시 — 상업이용 허용 ≠ 저작권 보장.

💳 가격

무료=비상업(개인) 한정, 유료(Pro·Premier)에서 상위 모델·상업권·스튜디오 기능.

🎯 언제 쓰나

노랫말 있는 완성곡을 빠르게 뽑을 때 — 영상 배경음악·징글·오리지널 곡. 상업 배포면 등급별 상업권·저작권 한계를 먼저 확인.

📖 Suno 가격

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

Udio — 라이선스 시대로 넘어간 경쟁자

Udio 공식 홈

🧭 한 줄 소개

프롬프트로 보컬 곡을 짓는 음악 생성 서비스. 음질·스타일 재현으로 이름을 얻은 완성곡 양대 주자.

✅ 강점

음질과 표현. 장르·보컬의 결을 세밀하게 잡고, 짧은 구간부터 긴 트랙까지 다룬다.

⚠️ 한계 (2026년의 큰 변화)

유니버설(UMG, 2025-10)·워너(WMG, 2025-11)와 라이선스 계약 체결 후 licensed 플랫폼으로 전환 중. 전환 과정에서 다운로드·스템 반출이 한시적으로 제한되었다고 보도 — "자유롭게 다운로드해 사용한다"는 전제가 이전과 달라질 수 있다.

💳 가격

유료 구독 중심(크레딧제). 전환 국면이라 조건 유동적 → 공식 페이지 확인.

🎯 언제 쓰나

음질·스타일 재현이 중요하고 권리가 정리된 경로로 음악을 만들 때. 단, 다운로드·상업 정책 변동을 감안한다.

📖 Udio

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

Google Lyria — 워터마크가 기본으로 박힌 음악 (Lyria 3)

Google DeepMind Lyria

🧭 한 줄 소개

Google 생태계에 녹아든 음악 생성 모델. Gemini·YouTube Dream Track·Vids·Flow 안에서 음악을 만든다(최대 약 3분).

✅ 강점

생태계 통합과 투명성 장치. 텍스트로 악기·템포·분위기를 조율하고, 무엇보다 생성물에 SynthID 워터마크가 기본으로 박힌다 — 귀에는 안 들리지만 AI 생성 여부를 나중에 탐지할 수 있다.

⚠️ 한계

Google 계정·생태계에 묶인다. 무료 도구 MusicFX는 완성곡이 아니라 짧은 클립·루프 중심이라 곡 한 편을 통째로 뽑기엔 부족하다.

💳 가격

MusicFX는 무료 실험 도구. Lyria는 Gemini·Vertex AI 등 각 제품 등급·API 안에서 제공.

🎯 언제 쓰나

이미 Google 생태계를 쓸 때, AI 생성 표식(워터마크)이 필요한 콘텐츠일 때, 배경용 짧은 음악·루프가 필요할 때.

📖 Google DeepMind · Lyria

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

Stable Audio — 권리 정리 데이터로, 제작·효과음까지 (3.0)

Stability AI Stable Audio

🧭 한 줄 소개

권리가 정리된(licensed) 데이터로 학습했음을 앞세운 제작 현장용 오디오 생성. 음악뿐 아니라 효과음(SFX)·분위기 사운드까지.

✅ 강점

상업 안전과 제작 제어. 학습 데이터 권리를 정리했다고 밝히고 엔터프라이즈엔 법적 배상(인뎀니피케이션)이 따른다. 인페인팅·트랙 확장 같은 세밀한 제어도 갖췄다.

⚠️ 한계

보컬 있는 "히트곡"보다 제작용 사운드·배경음악·효과음에 무게. 노랫말 붙은 완성곡을 손쉽게 뽑는 목적이면 Suno·Udio가 더 맞을 수 있다.

💳 가격·라이선스

커뮤니티 라이선스 — 연매출 100만 달러 미만은 상업 무료, 초과 시 엔터프라이즈 협의. API·웹·오픈 가중치·자체 호스팅.

🎯 언제 쓰나

상업 안전과 배상이 중요할 때, 배경음악·효과음을 제작 파이프라인에서 쓸 때, 소규모 상업이용을 무료 범위에서.

📖 Stability AI · Stable Audio

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

MusicGen — 오픈 음악 생성의 연구 뿌리 (Meta AudioCraft)

Meta AudioCraft / MusicGen

🧭 한 줄 소개

누구나 내려받아 로컬에서 돌리는 오픈 음악 생성의 연구 표준. 텍스트·멜로디 조건으로 반주 음악을 만든다(효과음 AudioGen·압축기 EnCodec과 한 묶음).

✅ 강점

개방성과 통제권. 로컬에서 실행하므로 데이터가 외부로 유출되지 않고, 코드가 공개되어 있어 실험·연구·파인튜닝이 자유로운 오픈 음악 생성 연구의 공용 출발점.

⚠️ 한계

완성도는 최신 상용에 못 미치고, 보컬 완성곡보다 짧은 반주 생성에 가깝다. 좋은 결과엔 숙련이, 로컬 실행엔 GPU가 필요하다.

💳 가격·라이선스

모델은 무료. 다만 라이선스가 상업을 가른다 — 코드는 MIT(자유)이지만 가중치는 CC-BY-NC(비상업). 연구·개인은 자유, 상업 배포는 막힌다.

🎯 언제 쓰나

로컬에서 자유롭게 실험·연구·자동화할 때, 데이터를 외부로 전송할 수 없을 때. 단, 상업 배포는 비상업 라이선스에 걸린다.

📖 Meta · AudioCraft/MusicGen

PART 4

PART 4

음성·TTS·더빙 도구 — 강점 축이 갈린다

ElevenLabs(품질·더빙) · OpenAI(실시간 대화) · Google(언어 폭) · Cartesia(저지연) · 서비스 종료 교훈 · 오픈 음성 셋.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

갈래를 바꾼다 — 노래에서 목소리로

여기서 갈래를 바꾼다. 노래(음악)에서 말(음성)로 넘어간다. 음성 도구가 하는 일은 셋으로 정리된다.

🔤 TTS · 🎭 보이스 클론 · 🌐 더빙

  • TTS — 글자를 목소리로 읽는다
  • 보이스 클론 — 짧은 녹음으로 특정 목소리를 흉내 낸다
  • 더빙 — A언어를 B언어 목소리로 옮긴다

음성 갈래의 급소는 저작권이 아니라 동의와 신뢰다. 타인의 목소리를 무단으로 복제하면 사칭·사기·딥페이크로 이어진다. 도구를 검토할 때 "이 목소리를 생성할 권리가 있는가"를 함께 확인한다.

🎨 이미지 프롬프트: "Editorial illustration on dark navy #1a1a2e background showing a central rounded box that reads exactly 'Voice' and nothing else, splitting into three branches. The top branch ends in a speaker labeled 'TTS'; the middle branch ends in a duplicated voice waveform labeled 'Clone'; the bottom branch ends in two flags labeled 'Dubbing'. A small padlock sits beside each branch. Exactly four text labels and no other text anywhere: 'Voice', 'TTS', 'Clone', 'Dubbing'. The central box contains ONLY the word 'Voice' — do not write 'Branches' or any other word. Thin line-art, teal #00b894 and purple #6c5ce7 accents, 16:9. CRITICAL: All visible text MUST be in English ONLY (no Korean characters). Each label appears EXACTLY ONCE — short labels only, no paragraph text, keep inside the frame. No mirrored or reversed text."

⚠️ 이 갈래의 도구들은 대부분 동의 확인·워터마크·사용 제한을 정책으로 둔다. "저작권에서 동의로" — 음성 파트 전체를 관통하는 축이다.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

🎨 Editorial illustration on dark navy #1a1a2e ba…

갈래를 바꾼다 — 노래에서 목소리로

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

ElevenLabs — 음성 생성의 기준점 (Eleven v3)

ElevenLabs 공식 홈

🧭 한 줄 소개

TTS·보이스 클론·더빙을 아우르는 음성 생성의 대표 주자. 자연스러움·표현력의 업계 기준점.

✅ 강점

목소리 품질과 폭. v3는 [속삭임]·[외침] 같은 감정·연기 태그를 지원하고 숫자·기호 오류를 크게 줄였다. 더빙 스튜디오로 30여 개 언어에 감정을 유지한 번역 더빙, URL 임포트, 높은 클론 품질.

⚠️ 한계

유료 중심이라 고품질·대량 작업은 비용이 빠르게 증가한다. 강력한 클론은 곧 악용 위험 → 동의·정책 준수가 전제.

💳 가격·정책

무료 티어는 상업·워터마크·생성량 제한. 보이스 클론은 본인 동의 또는 법적 권리가 있는 목소리만 허용, 무단·기만 사용 금지.

🎯 언제 쓰나

품질 좋은 내레이션·오디오북·더빙이 필요할 때, 여러 언어로 콘텐츠를 옮길 때. 음성 작업의 기본 선택.

📖 ElevenLabs 가격

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

OpenAI 음성 — 실시간 대화형 목소리 (gpt-realtime)

🧭 한 줄 소개

실시간으로 듣고 말하는 대화형 음성. 낭독을 넘어, 사람과 주고받는 음성 에이전트·통화형 서비스에 초점(API·ChatGPT 음성 모드).

✅ 강점

실시간성과 지시 따르기. 낮은 지연으로 말을 주고받고, "어떻게 말하느냐(어조·감정)"를 텍스트로 지시한다. 도구 호출·복잡한 지시가 강해 상담·통역 같은 대화형 응용에 맞고, 실시간 번역으로 확장 중.

⚠️ 한계

완성된 소비자용 "더빙 스튜디오"라기보다 개발자가 붙여 쓰는 API 성격. 오디오북 같은 긴 낭독의 후반 편집은 전용 도구가 나을 수 있다.

💳 가격

API 사용량 과금(오디오 토큰)과 ChatGPT 구독 안의 음성 모드.

🎯 언제 쓰나

실시간 음성 대화·에이전트·통역을 구축할 때, 이미 OpenAI API 위에서 개발 중일 때. 정적 낭독보다 양방향 대화가 목적일 때.

📖 OpenAI · Introducing gpt-realtime

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

Google 음성 — 다국어·생태계 (Gemini-TTS · Chirp 3)

Google Cloud Text-to-Speech

🧭 한 줄 소개

다국어와 생태계 통합을 앞세운 음성 합성. 70개 이상 언어를 지원하고, 자연어 프롬프트로 어조·속도·감정을 조율한다.

✅ 강점

언어 폭과 통제. 70여 개 언어·30여 음성, 여러 화자 대화를 한 번에 합성, 자연어 스타일 지시. Chirp 3는 즉석 보이스 클론을 허용 목록(allow-list) 승인 게이트로 열어 악용을 막는다. Vertex AI로 대규모 서비스에 붙이기 좋다.

⚠️ 한계

Google Cloud 생태계·개발 환경 전제. 소비자용 완성 앱이라기보다 클라우드 서비스·API 성격이라 붙여 쓰려면 개발이 필요하다.

💳 가격

Google Cloud 사용량 과금. 무료 한도 후 사용량 과금.

🎯 언제 쓰나

여러 언어로 안내·낭독을 대량 생성할 때, 다화자 대화 음성이 필요할 때, 이미 Google Cloud에서 서비스를 운영할 때.

📖 Google Cloud · Text-to-Speech

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

Cartesia Sonic — 지연이 승부인 실시간 음성 (Sonic-3)

Cartesia Sonic

🧭 한 줄 소개

지연(latency)을 극한으로 줄인 실시간 TTS. 통화·음성 에이전트처럼 반응 속도가 곧 품질인 곳을 노린다.

✅ 강점

속도. 첫 소리까지의 지연을 수십 밀리초 수준까지 줄여 음성 에이전트 지연 선두로 꼽힌다. 표현력 있는 목소리·보이스 클론도 갖췄고, 문자당 과금이라 규모가 커도 단가를 가늠하기 쉽다.

⚠️ 한계

강점이 실시간 대화에 집중돼 오디오북·더빙 같은 완성형 제작 편의는 전용 도구가 나을 수 있다. 실제 통화 총비용은 STT·LLM·통신까지 얹히면 커진다 — TTS 단가만으로 판단하면 안 된다.

💳 가격

무료 티어·저가 유료 구독, 사용량(문자) 과금. 보이스 클론은 별도 조건.

🎯 언제 쓰나

실시간 통화·음성 봇처럼 지연이 결정적일 때. 낭독·더빙보다 즉답 대화가 목적일 때.

📖 Cartesia · Sonic

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

서비스는 사라질 수 있다 — PlayHT의 교훈

음성 도구를 고를 때 반드시 짚어야 할 위험 하나를 실제 사례로 본다.

📉 무슨 일이 있었나

한때 다국어 음성 생성으로 널리 쓰이던 PlayHT(이후 PlayAI)는 2025년 7월 Meta에 인수됐고, 2025년 12월 31일 서비스를 종료했다. 종료와 함께 계정·저장 프로젝트·생성 음원·만들어 둔 보이스 클론까지 삭제됐다고 보도됐다.

🔑 교훈

폐쇄형 서비스는 편리하지만 제공자의 통제 아래 있다 — 요금·정책만이 아니라 서비스 존속 자체가 제공자의 결정이다. 중요한 자산을 한 서비스에만 종속시키면, 서비스 종료 시 자산도 함께 사라진다. 이것이 뒤에 다룰 오픈소스의 존재 이유 중 하나다 — 로컬에서 실행하는 모델은 제공자가 서비스를 종료해도 유지된다.

🎨 이미지 프롬프트: "Editorial illustration on dark navy #1a1a2e background. On the left a bright glowing browser window is switched on and healthy; on the right an identical window is grey, switched off, with small data icons dissolving into fading dots. A short arrow crosses from left to right. One short caption at the bottom reads 'Backup and portability'. Exactly one text label: 'Backup and portability'. Use generic blank windows with no brand logos. Thin line-art, teal #00b894 on the left and dim grey on the right with purple #6c5ce7 accents, 16:9. CRITICAL: All visible text MUST be in English ONLY (no Korean characters). Each label appears EXACTLY ONCE — short labels only, no paragraph text, keep inside the frame. No mirrored or reversed text."

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

🎨 Editorial illustration on dark navy #1a1a2e ba…

서비스는 사라질 수 있다 — PlayHT의 교훈

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

오픈소스 음성 — 내 기계에서, 라이선스를 보고

음성에도 다운로드해 로컬에서 실행하는 오픈소스가 있다. 데이터가 외부로 유출되지 않고, 서비스 종료 위험이 없으며, 세부 파라미터를 조정할 수 있다. 대신 GPU·설정·숙련이 필요하다. 여기서도 라이선스를 가장 먼저 확인한다.

Chatterbox GitHub

🟢 Chatterbox (Resemble AI)

MIT · 상업 자유 · 클론 품질 상업이용까지 자유로운 오픈 음성의 대표. 블라인드 청취 테스트에서 상용 서비스와 대등하다는 평가. 상업 배포가 필요한 오픈 음성 1순위 후보.

Coqui XTTS-v2

🟠 XTTS-v2 (Coqui)

다국어 · 비상업(CPML) 17개 언어를 지원하는 다국어 클론의 고전. 오래 검증됐지만 원 개발사 Coqui는 폐업(코드는 커뮤니티 포크 유지), 가중치는 비상업 — 연구·개인엔 자유, 상업 배포는 막힌다.

Bark GitHub

🔵 Bark

비언어 오디오 말소리를 넘어 웃음·한숨·효과음 같은 비언어 오디오까지 내는 특이한 모델. 정교한 낭독보다 표현적·실험적 오디오에 쓴다.

⚠️ "오픈소스=무조건 상업 자유"가 아니다. Chatterbox(MIT)는 자유롭지만 XTTS-v2(CPML)는 비상업이다. 같은 오픈이라도 라이선스가 상업이용 여부를 결정한다 — 음악의 MusicGen에서 확인한 원칙이 음성에서도 동일하게 적용된다.

📖 Chatterbox · Coqui XTTS-v2 · Bark

PART 5

PART 5

딥페이크·보이스 클론 윤리

재현할 수 있다 ≠ 재현해도 된다 · 동의·워터마크·게이트 · 최종 책임은 사용자에게.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

흉내 낼 수 있다는 것의 무게

보이스 클론은 목소리를 이해하는 것이 아니라 통계적으로 재현하는 기술이다. 짧은 녹음 몇 초만 있으면 특정인이 실제로 하지 않은 발화를 그 목소리로 합성할 수 있다. 편리한 만큼 위험하다 — 동의 없는 복제는 사칭·보이스피싱·딥페이크로 이어진다.

🛡️ 도구가 둔 방어선

원리를 이해한 사람은 이 기술이 왜 강력한지, 왜 위험한지를 동시에 파악한다. 그래서 도구들은 방어선을 둔다. - 클론에 본인 동의를 요구 - 결과물에 워터마크·AI 표식 - 승인 게이트로 오남용 차단

그러나 최종 책임은 도구가 아니라 사용자에게 있다. "내가 생성할 목소리의 주인이 이에 동의했는가" — 이 질문을 항상 먼저 던진다.

🎨 이미지 프롬프트: "Editorial illustration on dark navy #1a1a2e background showing a balance scale. The left pan holds a bright bulb labeled 'Convenience'; the right pan holds a warning triangle glowing red labeled 'Deepfake risk'. The base of the scale carries one short label 'Consent'. Exactly three text labels: 'Convenience', 'Deepfake risk', 'Consent'. Thin line-art, teal #00b894 on the left, red glow on the right pan, purple #6c5ce7 accents, 16:9. CRITICAL: All visible text MUST be in English ONLY (no Korean characters). Each label appears EXACTLY ONCE — short labels only, no paragraph text, keep inside the frame. No mirrored or reversed text."

⚠️ 재현할 수 있다 ≠ 재현해도 된다. 동의·워터마크·게이트는 도구의 방어선일 뿐, 최종 판단과 책임은 사용자의 몫이다.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

🎨 Editorial illustration on dark navy #1a1a2e ba…

흉내 낼 수 있다는 것의 무게

PART 6

PART 6

비교 매트릭스 — 두 판에 모아 견준다

음악 매트릭스(급소=저작권) · 음성 매트릭스(급소=동의) · 순위가 아니라 "내 상황의 축".

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

매트릭스 ① 음악 — 다섯 도구 한눈에

축은 대표 강점·상업이용/저작권·워터마크·오픈소스·난이도다. 목적은 순위가 아니라 내 상황에서 중요한 축에 따라 답이 달라진다는 점을 확인하는 것.

도구 (계열) 대표 강점 상업이용·저작권 워터마크 오픈 난이도
Suno (폐쇄형) 보컬 완성곡·손쉬움 유료=상업권(저작권 보장 아님) 정책 확인 낮음
Udio (폐쇄형) 음질·라이선스 전환 UMG·WMG 라이선스, 반출 변동 정책 확인 낮음
Google Lyria (폐쇄형) 생태계·짧은 클립 각 제품 등급 내 SynthID 기본 낮음
Stable Audio (개방+API) 권리정리·제작/효과음 소규모 상업 무료·엔터 배상 정책 확인 부분 중간
MusicGen (오픈) 연구 뿌리 코드 MIT·가중치 비상업 없음 중~높음

📌 음악의 공통 급소는 저작권이다. "생성했으니 판매해도 된다"가 도구마다 성립 조건이 다르고, 오픈이라고 상업이용이 자유롭지도 않다 — 표의 상업이용·저작권 칸을 반드시 확인한다.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

매트릭스 ② 음성 — 다섯 도구 한눈에

축은 대표 강점·보이스 클론·언어·오픈소스·난이도다. 음악과 급소가 다르다는 데 주목한다.

도구 (계열) 대표 강점 보이스 클론 언어 오픈 난이도
ElevenLabs (폐쇄형) 품질·더빙 동의 필수 30여 개(더빙) 낮음
OpenAI 음성 (API) 실시간 대화 제한적·정책 다국어 중간
Google 음성 (클라우드) 다국어·다화자 Chirp 3 승인 게이트 70여 개 중간
Cartesia Sonic (API) 실시간 저지연 조건부 다국어 중간
오픈 3종 (오픈) 로컬·자유 로컬 클론(책임=본인) 다국어(모델별) 높음

⚠️ 음성의 공통 급소는 동의와 워터마크다. 화질 좋은 목소리보다 "이 목소리를 만들 권리가 있나"가 먼저다. 오픈 3종(Chatterbox·XTTS·Bark)은 서비스 종료 위험에서 자유롭되(로컬), 라이선스와 클론 책임은 여전히 본인 몫이다.

PART 7

PART 7

선택 프레임 — 네 질문

무엇을(음악/음성) · 예산 · 상업이용(급소) · 기술수준·존속성 · 그리고 공통 실무 4점검.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

이런 상황이라면 — 네 질문 의사결정 흐름

표를 순위로 읽지 않으려면 질문이 필요하다. 오디오 도구를 고를 때 순서대로 던지는 네 질문이 오늘의 결론이다.

flowchart LR Q1["① 무엇을?<br/>음악·음성"] --> Q2["② 예산?"] --> Q3["③ 상업이용?<br/>급소"] --> Q4["④ 기술·존속?"] style Q1 fill:#0f2a24,stroke:#00b894,color:#eaeaea style Q2 fill:#0f2a24,stroke:#00b894,color:#eaeaea style Q3 fill:#2a2410,stroke:#fdcb6e,color:#eaeaea style Q4 fill:#141a33,stroke:#6c5ce7,color:#eaeaea

① 무엇을 만드나

음악·배경음·효과음 → Suno·Udio·Lyria·Stable Audio·MusicGen · 낭독·더빙·대화·통역 → ElevenLabs·OpenAI·Google·Cartesia·오픈

② 예산

돈 쓸 수 있으면 폐쇄형이 편함 · 기계·시간·기술 있으면 오픈소스(하드웨어 값은 든다)

③ 상업이용·급소

음악이면 저작권을(상업권 ≠ 저작권 보장) · 음성이면 동의를 먼저 · 상업 안전 최우선 → 권리정리·배상 쪽

④ 기술수준·존속성

접속해 바로 쓰면 폐쇄형 · 직접 설치·튜닝·데이터 보호·종료 위험 회피면 오픈소스

첫 질문(음악이냐 음성이냐)이 갈래를 가른다 — 도구는 바뀌어도 이 질문은 남는다.

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

마무리 — 오디오 공통 실무 점검

어떤 도구를 고르든 오디오에서 공통으로 확인할 것이 넷이다.

🧾 ① 상업이용·저작권

판매나 업무에 사용 가능한가. 특히 음악은 저작권이 정리 중 — 상업권 허용이 저작권 보장을 의미하지 않고, 오픈이라고 상업이용이 자유롭지도 않다.

🎙️ ② 보이스 클론 동의

복제할 목소리에 대해 주인의 동의를 확보했는가. 없으면 생성하지 않는다. 도구의 동의 정책·승인 게이트를 확인한다.

🏷️ ③ 워터마크·AI 표식

결과물에 AI 생성 표식이 삽입되는가, 상업물에서 그 유무·제거 가능 여부가 문제 되지는 않는가. AI 표기 의무 강화 흐름을 감안한다.

🌐 ④ 언어·존속성

내 언어가 지원되는가. 서비스 종료 시 종속된 자산은 어떻게 처리되는가 — 중요하면 백업·이동성 확보, 또는 로컬 오픈소스.

🎯 오늘의 결론 한 줄

"제일 좋은 하나는 없다 — 갈래를 정하고, 써도 되는지 묻고 고른다."

먼저 음악인지 음성인지 갈래를 정하고, 폐쇄형의 편함과 오픈소스의 자유를 저울질하고, 저작권(음악)·동의(음성)를 점검해 고른다. 도구는 계속 바뀌지만, 이 고르는 법은 남는다.

🎨 이미지 프롬프트: "Editorial illustration on dark navy #1a1a2e background showing four checklist cards in a row, each with a check-mark and one short label below, left to right: 'Rights', 'Consent', 'Watermark', 'Language'. Below them one larger short caption reads 'No single best'. Exactly five text labels: 'Rights', 'Consent', 'Watermark', 'Language', 'No single best'. Thin line-art, teal #00b894 checks and purple #6c5ce7 accents, 16:9. CRITICAL: All visible text MUST be in English ONLY (no Korean characters). Each label appears EXACTLY ONCE — short labels only, no paragraph text, keep inside the frame. No mirrored or reversed text."

생성형 AI Fundamentals·Session 9 · 음악·음성 생성 도구·플랫폼출처: 음악·음성 도구 파노라마Suno·Udio·ElevenLabs·Stable Audio·MusicGen (2026 검증)

부록 — 도구·출처 (2026년 7월 기준)

모델 버전·가격·라이선스는 변동이 심하다. 특히 오디오는 저작권·라이선스 정세가 빠르게 재편된다. 아래는 검증한 출처이며, 현장에서는 각 도구 공식 페이지에서 그날의 최신 값을 확인한다.

음악 - Suno v5.5 — 가격 - Udio공식 홈 - Google Lyria 3 — DeepMind - Stable Audio 3.0 — Stability AI - MusicGenMeta AudioCraft

음성 - ElevenLabs v3 — 가격 - OpenAI gpt-realtime — 소개 - Google Gemini-TTS·Chirp 3 — Cloud TTS - Cartesia Sonic-3 — Sonic - 오픈: Chatterbox · XTTS-v2 · Bark

실무 점검 — 상업이용·저작권·보이스 클론 동의·워터마크 조건은 각 도구 공식 약관·가격 페이지에서 확인.

1 / 35

목차 — Session 9

키보드 단축키 (뷰어)

네비게이션

다음 슬라이드 Space
이전 슬라이드 PgUp
처음 / 끝Home End
목차M

화면

전체화면F
테마 전환D
글자 크게 / 작게+ -
원래 크기 (100%)=
도움말 (열기/닫기)H ?
닫기 (모든 오버레이)Esc
강의 종료 (메인으로)Q

키보드 단축키 (강사)

네비게이션

다음 슬라이드 Space
이전 슬라이드 PgUp
처음 / 끝Home End
목차 (Menu)M
전체화면F

화면

테마 전환D
도움말 (열기/닫기)H ?
닫기 (모든 오버레이)Esc
툴바 펼치기 / 접기[ ]
강의 종료 (메인으로)Q

화면 확대

글자 크게 / 작게+ -
원래 크기 (100%)=
돋보기 (마우스 따라 2× 확대)V

발표자 도구 (PPT 호환)

화이트 화면W ,
블랙 화면B .
레이저 포인터L
펜 모드 ON/OFFP
펜 색상1 2 3 4
펜 자국 지우기 (현재 슬라이드)E
펜 — 마지막 스트로크 취소 (Undo)Z
펜 — 다시 (Redo)R
⏰ 쉬는시간 타이머T
📱 노트뷰 QR (휴대폰 동기화)N

PDF / 종료

PDF 저장 (슬라이드)Ctrl+P
강의 종료 (메인으로)Q X