PiSugar/whisplay-ai-chatbot
Pocket-sized AI chatbot built using a RPI Zero 2w / 5
解决的问题
提供创建一个口袋大小、语音交互式AI聊天机器人的软件和硬件蓝图。它将Raspberry Pi转变为一个手持设备,能够听懂语音,通过LLM进行处理,并作出回应,功能如同未来的对讲机。
工作原理
该系统运行在配备Whisplay HAT(提供LCD屏幕、扬声器和麦克风)的Raspberry Pi(Zero 2w 或 Pi 5)上。使用Python和Node.js的组合来处理聊天机器人逻辑。项目支持在线和离线构建,可选集成AI加速卡(如LLM8850或Raspberry Pi AI HAT+ 2(Hailo-10H)),以加速whisper(语音转文字)、LLM和VLM(视觉语言模型)的处理。
适用人群
希望使用Raspberry Pi硬件构建实体、便携式AI助手的硬件爱好者、创客和AI爱好者。
主要亮点
- 语音优先交互:支持按压说话和唤醒词功能,实现免提使用。
- 多模态能力:支持从文本提示生成图像以及视觉语言模型(VLM)。
- 硬件加速:兼容AI加速卡,实现更快的本地推理。
- 便携设计:专为搭配PiSugar电池和自定义3D打印外壳使用而设计。
相关
- 项目
- 项目
- Dispatch
- 项目
- 项目