示例索引
示例展示如何扩展框架,不是启用对应能力的唯一方式。先完成源码安装,再按各示例的 README 准备依赖与配置。示例通常使用独立端口,不要混用标准 Gateway 的连接地址。
| 想了解什么 | 从哪个示例开始 |
|---|---|
| 视觉对话、按需截图、持续观察 | X-Omni:默认 Qwen Omni,也演示 MiniCPM-o 的持续视听输入。 |
| 用 WebRTC 传输语音 | WebRTC:客户端到 Gateway 的可选传输,不改变上游模型协议。 |
| 接入车内事件、设备控制和业务 Agent | 智能座舱。 |
| 接入硬件语音客户端 | AI Passport。 |
| 使用外部长期记忆系统 | VoiceMem。 |
| 使用托管 API 长期记忆 | Memcode。 |
| 使用外部知识库 | LightRAG。 |
| 多场景客服与人工坐席 | 客服语音助手:零售与航空场景。 |
| 评测前台与完整系统 | Benchmark。 |
选择扩展位置
- 换语音模型:实现 Realtime Provider。
- 换办事 Agent:实现 Backend Adapter。
- 换客户端:使用 Gateway Client Protocol。
- 增加聊天工具:配置 MCP 或 OpenAPI。
- 换知识库或记忆:实现对应的 Knowledge Provider 或 Memory Provider。
示例中的业务提示词、设备动作和专用工具留在示例内。接口边界见扩展总览。