개요
FunClip은 로컬에 배포해 사용하는 완전한 오픈 소스 동영상 클립 제작 도구입니다. Alibaba TONGYI 음성 연구소의 오픈 소스 FunASR Paraformer 계열 모델로 동영상의 음성을 인식합니다. 사용자는 인식 결과에서 원하는 텍스트 구간이나 화자를 선택한 뒤 버튼을 눌러 해당 구간의 클립을 만들 수 있습니다.
산업용 오픈 소스 모델 Paraformer-Large를 통합해 타임스탬프도 예측합니다. SeACo-Paraformer의 핫워드 설정 기능으로 음성 인식 시 고유명사나 이름 등을 지정할 수 있으며, CAM++ 화자 인식 모델로 자동 식별된 화자 ID를 기준으로 특정 화자의 구간을 추출할 수 있습니다.
기능은 Gradio 인터페이스로 제공되며 서버에 배포해 브라우저에서 사용할 수도 있습니다. 여러 구간을 선택해 클립을 만들 수 있고, 전체 동영상과 선택한 구간의 SRT 자막을 자동으로 제공합니다. OrcaRouter 같은 OpenAI 호환 스마트 라우팅 게이트웨이를 통한 LLM 보조 클립 제작도 지원합니다.
모델 선택지에는 중국어 동영상 클립 제작용 기본 Paraformer, Fun-ASR-Nano 체크포인트, 감정 및 오디오 이벤트 태그를 제공하는 다국어 ASR 모델 SenseVoice, 익명 화자 레이블과 타임스탬프를 제공하는 장시간 ASR 모델 MOSS, 영어 동영상 클립 제작용 Paraformer English 모델이 포함됩니다.
요금
요금과 한도는 변경될 수 있습니다. 통화, 결제 주기, 최소 사용자 수 및 이용 한도를 공식 웹사이트에서 확인하세요.
활용 사례
- 음성 인식 결과에서 텍스트를 선택해 동영상 구간 추출
- 자동 인식된 화자 ID로 특정 화자의 발화 구간 추출
- 고유명사와 이름을 핫워드로 지정해 ASR 인식 결과 개선
- 전체 동영상과 선택 구간의 SRT 자막 자동 생성
- OpenAI 호환 게이트웨이를 통한 LLM 보조 클립 제작
- 서버에 Gradio 서비스를 배포하고 브라우저에서 사용
- 감정 및 오디오 이벤트 태그를 포함한 다국어 ASR 실행
기능
동영상 음성 전사
선택한 텍스트로 동영상 클립 제작
인식된 화자별 영상 구간 추출
음성 인식 핫워드 설정
전체 동영상 SRT 자막 생성
선택한 클립의 자막 내보내기
언어 모델을 활용한 클립 제작 보조
리뷰
아직 리뷰가 없습니다. 첫 번째로 사용 경험을 공유해 보세요!