Fish Audio

Fish Audio S2-Pro(으)로 AI 대사 생성하는 방법

Fish Audio S2-Pro의 다중 화자 대화 모드는 Fish Audio 계열 중 S2-Pro에만 있는 기능입니다 — 이전 버전인 S1은 지원하지 않습니다. [Speaker:Name] 문법으로 화자마다 다른 목소리를 배정하고, [whispering], [laughing nervously], [pause two seconds] 같은 자연어 대괄호 큐로 대사 한 줄 한 줄의 연기를 지시할 수 있습니다. 동일한 보이스 ID에서 자동 감지되는 80개 이상 언어를 지원하므로, 다국어 대화 씬(예: 영어·중국어·일본어로 함께 출시되는 오디오 드라마)이나 ElevenLabs의 고정된 인라인 태그 집합을 넘어서는 표현 범위가 필요한 씬에는 Fish Audio가 가장 강력한 선택입니다. 오픈소스 서빙 방식이므로 민감하거나 공개 전인 콘텐츠라면 Astorie 밖에서 대화 생성을 직접 셀프 호스팅할 수도 있습니다.

Step-by-Step Guide

1

이 씬에 Fish Audio가 맞는지 판단하기

Fish Audio S2-Pro는 다음 세 가지 상황에서 ElevenLabs Dialogue v3보다 더 적합합니다. (1) 대화가 여러 언어로 출시되는 경우 — Fish Audio는 동일한 보이스 ID로 80개 이상 언어를 처리하며 모델을 따로 바꿀 필요가 없습니다. (2) ElevenLabs의 고정된 [whispers] / [laughs] / [excited] / [sighs] / [pause] 집합을 넘어서는 자연어 감정 큐가 필요한 경우 — 예를 들어 [conspiratorial whisper], [nervous chuckle], [exhausted sigh] 같은 것입니다. (3) 민감한 콘텐츠를 위해 Astorie 밖에서 셀프 호스팅 인프라가 필요한 경우입니다. 정교함이 가장 중요한 영어 전용 대본 애니메이션이라면 ElevenLabs Dialogue v3가 더 안전한 기본 선택입니다.

2

목소리를 배정하고 [Speaker:] 태그로 스크립트 작성하기

씬을 쓰기 전에 캐릭터마다 목소리를 고르거나 복제하세요. 그런 다음 [Speaker:Cole], [Speaker:Mira], [Speaker:Captain]처럼 명확한 화자 태그로 스크립트 형식을 맞추세요. 각 줄 앞에는 화자가 표시되며, 모델은 이 태그를 이용해 화자가 바뀌는 지점에서 보이스 ID를 전환합니다. 대사는 짧게(1~3문장) 유지하고 대사 사이에는 줄바꿈을 사용하세요. 끊기는 상황을 표현하려면 대사를 줄표로 끝내고 다음 화자가 바로 이어받게 하세요. 목소리 동의: 미리 준비된 목소리 대신 캐릭터용으로 목소리를 복제했다면 각각의 서면 허가를 기록해 두세요 — Fish Audio는 오픈소스이므로 동의 이행의 책임은 사용자에게 있습니다.

3

자연어 대괄호로 연기 지시하기

Fish Audio S2-Pro의 열린 대괄호 큐를 사용하면 연기를 자신의 말로 자유롭게 묘사할 수 있습니다: [conspiratorial whisper], [exhausted sigh], [pause for two seconds], [nervous chuckle]. 각 큐는 영향을 줄 단어 바로 앞, 한 화자의 대사 안에만 배치하세요. ElevenLabs의 고정된 태그 집합과 비교하면, Fish Audio의 열린 대괄호는 더 넓은 표현 범위를 주는 대신 해석의 예측 가능성이 다소 떨어집니다. 미묘한 감정 변화가 있는 씬(캐릭터가 세 줄에 걸쳐 차분함에서 의심, 경계로 옮겨가는 경우)이라면 Fish Audio의 서술형 큐가 고정된 [excited] / [angry] 태그보다 더 정확하게 들어맞습니다. 씬을 확정하기 전에 감정 비트마다 2~3가지 연기를 테스트해 보세요.

4

한 번 렌더링해 여러 언어로 출시하기

Fish Audio의 80개 이상 언어 지원은 다국어 대화에서 진가를 발휘합니다. 영어 스크립트로 씬 캔버스를 한 번 만든 다음, 캔버스를 복제해 스크립트를 번역하세요 — 동일한 [Speaker:Name] 구조와 동일한 보이스 ID를 그대로 유지합니다. Fish Audio는 모든 언어 버전에서 동일한 복제(또는 미리 준비된) 목소리를 사용하므로, 각 캐릭터의 음성 정체성이 영어, 중국어, 일본어, 스페인어 버전 사이에서 일관되게 유지됩니다. 캔버스를 템플릿처럼 쓰는 이 방식 덕분에 버전마다 캐릭터 목소리를 새로 만들지 않고도 하나의 원본 캔버스에서 다국어 오디오 드라마를 출시할 수 있습니다. 참고: Astorie에서 Fish Audio는 현재 SEO 노출 위치로 자리 잡고 있습니다 — 실제 프로덕션 런타임 연동 여부는 워크스페이스 설정에 따라 다르며, Fish Audio가 연결되어 있지 않다면 다국어 워크플로우에는 ElevenLabs Multilingual v2를 대신 사용하세요.

Prompt Examples

Fish Audio 대괄호 큐를 사용한 2인 심문 씬입니다. [skeptically, leaning in]과 [nervous whisper] 큐는 연기를 자연어로 묘사하며, ElevenLabs의 고정 태그로는 낼 수 없는 더 넓은 표현 범위를 보여줍니다.

[Speaker:Cole] So you were home all night? [Speaker:Mira] [pause for two seconds] Yes. With my sister. [Speaker:Cole] [skeptically, leaning in] And she'll vouch for that? [Speaker:Mira] [nervous whisper] She has to.

같은 3인 씬을 중국어로 렌더링한 버전입니다 — Fish Audio는 언어가 달라도 동일한 보이스 ID를 사용하므로, 캐릭터의 음성 정체성이 영어판과 중국어판 사이에서 동일하게 유지됩니다.

[Speaker:Captain] 任务控制,状态检查。 [Speaker:Engineer] [excited] 所有系统正常! [Speaker:Pilot] 准备好了,船长。 [Speaker:Captain] [confidently] 出发吧。

Parameter Tips

다중 화자 대화는 Fish Audio 계열 중 S2-Pro에서만 지원됩니다 — S1은 [Speaker:Name] 태그를 지원하지 않습니다. 캐릭터가 둘 이상인 씬이라면 반드시 S2-Pro를 사용하세요.

열린 대괄호 큐([conspiratorial whisper], [exhausted sigh])는 ElevenLabs의 고정 태그보다 더 넓은 표현 범위를 주지만 해석의 예측 가능성은 다소 떨어집니다. 확정하기 전에 테스트해 보세요.

80개 이상 언어에서 동일한 보이스 ID를 쓸 수 있으므로 다국어 오디오 드라마도 영어, 중국어, 일본어 등에서 일관된 캐릭터 목소리를 유지합니다. 한 번 만들고 버전마다 스크립트만 번역하세요.

오디오가 자체 인프라를 벗어나지 않아야 하는 민감하거나 공개 전인 대화 콘텐츠에는 셀프 호스팅 서빙을 사용할 수 있습니다.

애니메이션 단편에서는 렌더링된 오디오를 캐릭터별로 나누고 각 트랙을 같은 Astorie 캔버스의 별도 립싱크 노드(OmniHuman 또는 Kling Avatar)에 공급하세요.

What to Expect

Fish Audio S2-Pro의 다중 화자 대화는 다국어를 지원하는 오픈소스 선택지입니다 — 더 넓은 언어 범위, 더 유연한 대괄호 스타일 감정 큐, 셀프 호스팅 가능한 인프라를 갖췄습니다. ElevenLabs Dialogue v3와의 트레이드오프: 영어 감정 표현의 정교함은 다소 떨어지고, 대괄호 해석의 예측 가능성도 조금 낮으며, 동의 이행의 책임은 전적으로 사용자에게 있습니다. 정교함이 가장 중요한 영어 전용 애니메이션이라면 ElevenLabs가 더 안전합니다. 다국어 오디오 드라마, 고정 태그를 넘어서는 미묘한 감정 변화가 있는 씬, 또는 셀프 호스팅 제작이라면 Fish Audio S2-Pro를 선택할 가치가 있습니다. Astorie 캔버스에서 씬을 한 번 만들고, 보이스 ID는 그대로 유지한 채 캔버스를 복제해 스크립트를 번역하는 방식으로 현지화 버전을 출시하세요.

Use Fish Audio S2-Pro on Astorie

Connect Fish Audio S2-Pro with other AI models on Astorie's infinite canvas. No GPU required — start free.

Get Started Free

Related features

Docs

Related reading

Try Other Models for This Task

AI 대사 생성하는 방법