KnowClip-ai/knowclip

해결하는 문제

KnowClip은 긴 영상(강의, 인터뷰, 팟캐스트, 라이브 스트리밍 등)을 소셜 미디어를 위한 짧고 매력적인 클립으로 변환하는 과정을 자동화합니다. 수 시간 분량의 영상을 일일이 확인하며 하이라이트 순간을 찾아 수동으로 잘라내는 번거로움을 없애줍니다.

작동 원리

이 도구는 4단계 파이프라인을 따릅니다:

1. 로컬 ASR: Paraformer-large 모델을 사용하여 기기 내에서 자동 음성 인식을 수행하고, 단어 단위 타임스탬프가 포함된 대본을 생성합니다.
2. LLM 분석: 대본을 LLM(사용자가 제공한 OpenAI 호환 API 키를 통해)으로 전송하여 제목, 설명, 해시태그를 포함한 가장 매력적인 세그먼트를 식별합니다.
3. 미리보기: 사용자는 제안된 하이라이트 세그먼트를 카드 형태로 검토할 수 있습니다.
4. 일괄 내보내기: 선택된 클립은 ffmpeg -c copy (스트림 복사)를 사용하여 내보내지며, 재인코딩 없이 거의 즉각적인 내보내기가 가능합니다.

대상 사용자

개인정보를 보호하고 비용을 절감하면서 긴 영상에서 빠르게 하이라이트를 추출하고자 하는 콘텐츠 크리에이터, 교육자, 팟캐스터.

주요 특징

• 개인정보 우선: 영상 소스와 ASR 처리는 전적으로 로컬 머신에서 이루어집니다.
• 저비용: 구독료가 없으며, 사용자는 자신의 LLM API 사용료만 지불하면 됩니다.
• 고속: 스트림 복사를 사용하여 밀리초 단위의 클립 내보내기를 지원합니다.
• 유연한 LLM 통합: DeepSeek, Kimi, GLM, OpenAI를 포함한 모든 OpenAI 호환 API를 지원합니다.