PC2005-cloud/dsh-pet

해결하는 문제

dsh-pet는 DeepSeek Harness (DSH) 웹 인터페이스용 가상 데스크톱 펫 플러그인입니다. AI 인터페이스의 핵심 기능에 방해가 되지 않으면서 사용자 경험을 향상시키기 위해 화면에 존재하는 사용자 정의 가능한 애니메이션 동반자를 제공합니다.

작동 방식

이 프로젝트는 AI 생성 펫을 만들기 위한 완전한 파이프라인을 구현합니다:

1. 프롬프트 생성: 특정 레시피를 사용하여 AI 비디오 도구(예: Keling, Runway)를 활용해 캐릭터가 다양한 동작을 수행하는 10초짜리 그린스크린 비디오를 생성합니다.
2. 자산 파이프라인: Python 기반 체인은 이러한 비디오를 워터마크 제거, 크로마키(그린스크린 제거) 또는 Premiere Pro에서 수동 마스킹, 캐릭터 위치 정규화, 투명 WebM 파일로의 인코딩 처리합니다.
3. 플러그인 통합: 처리된 애니메이션은 TS 기반 플러그인에 통합되어 애니메이션 체인을 관리하며, 가중치 기반 확률에 따라 펫이 대기, 이동, 랜덤 동작 사이를 자연스럽게 전환합니다.

대상 사용자

• AI 인터페이스에 시각적 동반자를 원하는 DeepSeek Harness 사용자.
• AI 비디오 생성 및 자동 처리 파이프라인을 활용해 자신만의 맞춤형 애니메이션 펫을 만들고 싶은 개발자.

주요 특징

• 엔드투엔드 워크플로우: AI 프롬프트에서 최종 플러그인 자산에 이르기까지 전체 프로세스 포함.
• 동적 애니메이션 체인: 대기, 회전, 이동 등의 가중치 기반 동작을 부드러운 크로스페이드 전환으로 자동 순환.
• Harness 통합: DSH의 핵심 변경 없이 작동하며, 런타임 LLM 비용이 발생하지 않습니다.
• 사용자 정의 가능: 전용 설정 페이지를 통해 여러 펫을 동시에 지원하고, 각각의 크기와 위치를 개별 설정 가능.
• 인터랙티브 요소: 화면 내 이동, 클릭 반응, 드래그 앤 드롭 기능을 지원합니다.