PiSugar/whisplay-ai-chatbot

Pocket-sized AI chatbot built using a RPI Zero 2w / 5

해결하는 문제

작은 크기의 음성 상호작용 AI 챗봇을 만들기 위한 소프트웨어 및 하드웨어 설계도를 제공합니다. Raspberry Pi를 손에 쥘 수 있는 휴대용 장치로 변환하여 음성을 듣고 LLM을 통해 처리한 후 응답할 수 있게 하며, 미래의 워키 토키처럼 작동합니다.

작동 방식

Whisplay HAT(액정 화면, 스피커, 마이크 포함)를 장착한 Raspberry Pi (Zero 2w 또는 Pi 5)에서 시스템이 작동합니다. 챗봇 로직은 Python과 Node.js의 조합으로 처리됩니다. 온라인 및 오프라인 빌드를 모두 지원하며, whisper(음성-텍스트 변환), LLM, VLM(시각-언어 모델) 처리 속도를 높이기 위해 LLM8850 또는 Raspberry Pi AI HAT+ 2 (Hailo-10H)과 같은 AI 가속 카드와의 옵션 통합도 가능합니다.

대상 사용자

Raspberry Pi 하드웨어를 사용해 물리적이고 휴대 가능한 AI 어시스턴트를 만들고 싶은 하드웨어 애호가, 메이커, AI 애호가.

주요 특징

  • 음성 우선 상호작용: 푸시 투 톡 및 웨이크워드 기능을 지원해 손을 떼고 사용 가능.
  • 다중 모달 기능: 텍스트 프롬프트에서 이미지 생성 및 시각-언어 모델(VLM) 지원.
  • 하드웨어 가속: 더 빠른 로컬 추론을 위한 AI 가속 카드와 호환.
  • 휴대용 디자인: PiSugar 배터리와 맞춤형 3D 프린팅 케이스와 함께 사용 가능.

관련

  • 프로젝트
  • 프로젝트
  • Dispatch
  • 프로젝트
  • 프로젝트