모시 AI

모시 AI(Moshi AI)는 프랑스 Kyutai 연구소에서 개발한 오픈 소스, 실시간 다중 모달 대화 모델로, 양방향 음성 인터랙션을 지원하여 사용자가 AI와 동시에 대화할 수 있게 하여 자연스럽고 매끄러운 실시간 대화 경험을 제공합니다.

주요 기능은 실시간 양방향 음성 대화, 다중 모달 정보(음성, 텍스트, 시각) 융합 처리, 감정 음성 생성, 다양한 음성 스타일 전환 및 오픈 소스 코드와 로컬 offline 배포를 지원합니다.

네, 모시 AI는 4비트 양자화 버전을 제공하며, M1 칩이 장착된 맥북이나 24GB VRAM을 갖춘 일반 소비용 GPU에서 로컬 오프라인 배포 및 실행이 가능합니다.

모시 AI는 오픈 소스 프로젝트로, 코드, 프리트레이닝 모델 및 기술 보고서는 무료로 공개되어 있으며 사용자는 직접 배포할 수 있습니다. 사용은 주로 로컬 컴퓨팅 자원을 필요로 하며 직접 사용 비용은 없습니다.

모시 AI는 매우 낮은 엔드 투 엔드 대기 시간을 구현합니다. 오디오 처리 지연은 약 80밀리초이며, 전체 상호작용 지연은 약 200밀리초로 실시간 대화의 원활함을 보장합니다.

일정 수준의 기술 배경을 가진 개발자와 연구자, 실시간 음성 인터랙션 기능을 통합해야 하는 애플리케이션 구축자, 예: 스마트 어시스턴트, 접근성 서비스, 콘텐츠 제작 및 고객 서비스 분야에 적합합니다.