Open-LLM-VTuber:开源虚拟主播交互系统
阅读完整评测深度教程 · 踩坑记录 · 常见问题
扫码查看

Open-LLM-VTuber 是一个整合了大语言模型、语音识别、语音合成和 Live2D 虚拟形象的开源项目,所有功能均可本地离线运行。它能帮助用户搭建一个本地语音助手,实现实时语音对话并支持打断,还能通过视觉感知功能“看”屏幕内容,作为桌面AI助手原型。该项目主要适合AI应用开发者研究语音交互链路、本地部署爱好者保障数据隐私,以及Live2D模型创作者为自己的模型赋予对话能力。

Open-LLM-VTuber:开源虚拟主播交互系统

这是什么

Open-LLM-VTuber 是一个开源的虚拟主播交互系统。它将大语言模型、语音识别、语音合成和 Live2D 虚拟形象整合在一起,全部在本地电脑上运行。它能让你搭建一个属于自己的、能实时语音对话并看到你屏幕内容的 AI 桌面伙伴。

核心能力

  • 搭建本地语音助手:整合语音识别和语音合成,支持通过麦克风进行实时语音对话,并具备打断功能。
  • 赋予 LLM 视觉能力:支持视觉感知功能,可以让 AI “看”你的屏幕内容,并基于此进行对话,适合制作桌面助手原型。
  • 创建跨平台桌面宠物:支持 Windows、macOS、Linux 系统,提供透明背景的桌面宠物模式,让虚拟形象悬浮在屏幕任意位置。

适合谁

适合 AI 应用开发者,用于研究语音交互链路或为现有 LLM 应用添加语音入口和虚拟形象;也适合本地部署爱好者和 Live2D 模型创作者,用于在保护隐私的前提下,为自己创作的模型赋予对话能力。

获取方式

这是一个开源项目,代码托管在 GitHub 上。你可以访问其 GitHub 仓库获取源码和详细文档:https://github.com/Open-LLM-VTuber/Open-LLM-VTuber.git

微信微博邮箱复制链接