xixihhhh/hotclip

해결하는 문제

HotClip은 긴 형식의 비디오(예: 팟캐스트, 라이브 스트림 다시보기, 강좌)를 TikTok, YouTube Shorts, Bilibili와 같은 플랫폼을 위한 높은 참여율의 세로형 숏폼 비디오(9:16)로 변환하도록 설계된 오픈소스 AI 도구입니다. 비싼 크레딧 기반 SaaS 도구와 클라우드 업로드의 필요성을 제거하고, 개인정보 보호와 비용 효율성을 위해 완전히 로컬 워크플로우를 제공합니다.

작동 방식

이 도구는 가져오기, AI 하이라이트 감지, 내보내기의 세 단계 프로세스를 따릅니다. SenseVoice 또는 Paraformer와 같은 로컬 ASR(자동 음성 인식) 엔진을 사용하여 오디오를 단어 수준 타임스탬프가 있는 텍스트로 전사합니다. 그런 다음 LLM이 전사 내용을 분석하여 다차원 점수 시스템(훅, 구조, 가치, 트렌드)을 기반으로 "바이럴" 순간을 식별합니다. 정확성을 보장하기 위해 텍스트를 오디오 음량, 시각적 움직임 피크, 탄막 히트맵과 교차 참조합니다. 마지막으로 얼굴 추적을 사용하여 비디오를 자동으로 세로 형식으로 크롭하고, 동적 자막을 추가하며, 오디오 정규화와 노이즈 감소를 적용한 후 내보냅니다.

대상 사용자

• 스트리머 및 클립 제작자: 수시간의 라이브 스트림 다시보기에서 하이라이트를 자동으로 추출합니다.
• 이커머스 팀: 전환 로직을 기반으로 제품 데모 클립을 만듭니다.
• 팟캐스터: 오디오 전용 쇼를 파형 애니메이션이 있는 세로형 비디오로 변환합니다.
• 콘텐츠 제작자: 토킹헤드 비디오에서 필러 단어와 일시정지를 빠르게 제거합니다.

하이라이트

• 완전 로컬 처리: 전사, 클리핑, 내보내기가 사용자 기기에서 이루어져 개인정보 보호와 비용 제로를 보장합니다.
• 증거 기반 클리핑: 텍스트 분석과 음량, 시각적 움직임, 시청자 상호작용 데이터(탄막)를 결합하여 모든 컷을 정당화합니다.
• 스마트 세로 리프레이밍: 얼굴을 자동 추적하여 피사체를 9:16 형식에서 중앙에 유지하고 불안정한 움직임을 방지합니다.
• 동적 자막: 전문가 스타일의 "Hormozi" 큰 텍스트, 버블 효과, 의미론적 줄바꿈을 갖추어 가독성을 향상시킵니다.
• 에이전트 준비 생태계: 헤드리스 CLI와 MCP 서버를 포함하여 AI 에이전트(예: Claude Code)가 단일 명령으로 전체 클리핑 파이프라인을 처리할 수 있습니다.
• 규정 준수 도구: 플랫폼 금지 단어 린팅과 AIGC 라벨링이 내장되어 제작자가 차단을 피하는 데 도움을 줍니다.