홈으로 돌아가기
공식 웹사이트 방문하기
Meta Spirit LM 텍스트 음성 상호 합성 네이티브 옴니모달 오픈소스 언어 모델
공식 서비스 바로가기
서비스 상세 소개
Meta Spirit LM 텍스트 음성 상호 합성 네이티브 옴니모달 오픈소스 언어 모델: 텍스트와 음성 토큰을 단일 시퀀스 상에서 동시에 학습하여 인간의 억양과 감정 웃음소리를 보존하며 음성과 텍스트를 자유자재로 넘나드는 메타의 최신 오픈소스 멀티모달 모델입니다.
Meta Spirit LM은 메타 페어 FAIR 연구팀이 공개한 차세대 멀티모달 파운데이션 모델로 텍스트와 음성을 서로 다른 인코더 디코더로 분리하지 않고 단일 트랜스포머 아키텍처 내에서 완전히 통합했습니다. 화자의 분노 슬픔 기쁨 등 미세한 감정 상태와 음성 억양을 텍스트 맥락과 함께 학습하여 텍스트 입력으로부터 감정이 살아있는 음성을 출력하거나 음성 입력으로부터 감정적 뉘앙스를 해석하는 탁월한 표현력을 발휘합니다.
핵심 기능 목록
텍스트 토큰과 연속 음성 토큰을 단일 신경망 상에서 인터리브 처리하는 네이티브 구조
화자의 감정 뉘앙스 분노 기쁨 속삭임 웃음소리를 음향적으로 정밀 재현
텍스트 투 스피치 TTS 및 스피치 투 텍스트 STT를 별도 파이프라인 없이 단일 실행
허깅페이스를 통한 사전 훈련 모델 가중치 및 파이토치 추론 코드 전면 무료 개방