Comfy

ComfyUI에서의 Fish Audio 음성

Fish Audio가 ComfyUI의 공식 파트너 노드로 출시되었습니다. S2.1 Pro를 사용하여 표현력이 풍부한 음성을 생성하고, 짧은 녹음 파일로 음성을 클로닝하며, 오디오를 텍스트로 변환하세요. 이 모든 과정을 이미지 및 비디오 모델과 동일한 그래프 내에서 수행할 수 있습니다.

카테고리크리에이티브 워크플로우
통합ComfyUI 공식 파트너 노드
찾는 방법노드 메뉴 → partner/audio/Fish Audio
기본 모델S2.1 Pro, 노드당 최대 5개 음성
노드텍스트 음성 변환(Text to Speech), 음성 텍스트 변환(Speech to Text), 음성 선택기(Voice Selector), 즉석 음성 클로닝(Instant Voice Clone)
템플릿Comfy Cloud 또는 템플릿 라이브러리의 텍스트 음성 변환, 음성 클론 변환, 음성 텍스트 변환
음성 클로닝Instant Voice Clone 노드에서 무료로 제공되며, 생성된 음성에 대해서만 비용을 지불합니다.
ComfyUI 내 Fish Audio 파트너 노드 ↗

Comfy와 Fish Audio를 함께 쓰는 이유

ComfyUI는 크리에이터가 이미지, 비디오, 3D 모델을 연결하여 반복 가능한 워크플로우를 만드는 공간입니다. Fish Audio는 여기에 음성을 더합니다. 표현력이 풍부하고 제어 가능한 음성과 클로닝 기능을 동일한 그래프에 추가하여, Comfy를 벗어나지 않고도 스크립트에서 완성된 오디오까지 장면을 구현할 수 있습니다.

제어 가능한 다중 화자 음성

Text to Speech 노드는 최대 5개의 음성으로 S2.1 Pro를 실행합니다. 화자를 @Voice1, @Voice2와 같이 태그하고, [속삭임] 또는 [흥분됨]과 같은 큐(Cues)를 사용하여 각 대사를 연출하세요.

그래프 내에서 음성 클로닝

Instant Voice Clone 노드는 짧은 녹음을 워크플로우 전반에서 재사용할 수 있는 개인용 음성으로 변환합니다. 클로닝은 무료이며, 생성한 음성에 대해서만 비용을 지불하면 됩니다.

하나의 워크플로우로 장면 현지화

S2.1 Pro는 30개 이상의 언어를 지원하므로, 하나의 그래프로 모든 시장에 맞는 음성을 생성할 수 있습니다. 스크립트만 바꾸고 음성은 그대로 유지하여, 한 번의 실행으로 각 버전을 렌더링하세요.

사용 방법

Fish Audio 음성을 Comfy 위의 실제 제품으로 출시하기까지 3단계.

STEP 01

Fish Audio 노드 추가

최신 버전의 ComfyUI로 업데이트한 다음, Fish Audio 템플릿(Text to Speech, Voice Clone to Speech 또는 Speech to Text)을 열거나 partner/audio/Fish Audio에서 노드를 추가하세요.

STEP 02

로그인 및 음성 선택

안내에 따라 ComfyUI 계정에 로그인한 다음, 프리셋 음성, fish.audio의 음성 모델 또는 Instant Voice Clone으로 만든 새 클론을 연결하세요.

STEP 03

작성, 실행 및 저장

[속삭임]이나 [웃음]과 같은 큐를 포함하여 스크립트를 작성하고 워크플로우를 실행한 다음, 오디오를 저장하거나 비디오 및 립싱크 노드로 바로 전달하세요.

Fish Audio와 Comfy로 팀들이 만드는 것

말하는 캐릭터와 아바타

Fish Audio 음성을 image-to-video 및 립싱크 노드와 결합하여, 하나의 그래프 내에서 모든 캐릭터에게 일관된 목소리를 부여하세요.

다중 캐릭터 대화

단일 Text to Speech 노드에 최대 5개의 음성을 캐스팅하여 장면, 숏폼, 예고편, 팟캐스트를 제작하세요.

전사 및 캡션

Speech to Text 노드는 텍스트, 감지된 언어 및 타임스탬프가 포함된 세그먼트를 반환하여 자막 제작이나 워크플로우의 다음 단계에 바로 사용할 수 있게 해줍니다.

Fish Audio와 Comfy로 개발을 시작하세요

ComfyUI에서 Fish Audio 파트너 노드가 어떻게 작동하는지 확인하거나, 크리에이터 프로그램 및 공동 마케팅에 대해 파트너십 팀에 문의하세요.