关于此软件

MobMate WhispTalk 是一款专为游戏语音聊天设计的零云端语音辅助工具包。

它不是为"无法说话"的人而设计——而是为那些选择在当下不说话，尊重场合氛围和距离感的人而创建。

无需使用真实声音，就能保持在语音聊天的圈子里。只在需要时，简短、自然地表达。

与云端服务不同，所有语音处理都在您的PC上完成（零云端）。您的语音和文本绝不会发送到外部，优先保护隐私。

---

## 🧠 主要功能

### 实时语音识别 & 匿名语音输出

在本地转录您的语音，并以匿名语音播放。无需使用真实声音，即可在对话中留下您的反应和回应。

**使用场景：**

* 深夜游戏：不吵醒家人也能参与VC

* 直播中：不向观众暴露真实声音也能沟通

* 身体不适：喉咙疼痛时也能继续语音聊天

* 注重隐私：保护声纹和个人信息的同时参与

---

### 📻 电台聊天（Radio Chat）

通过全局热键或叠加层即时发送预设短语和常用表达。

**特点：**

* **全局热键支持：** 游戏中无需Alt+Tab即可发言

* **叠加层显示：** 叠加在游戏画面上，鼠标点击即可发送

* **从历史记录轻松注册：** 右键点击过去的短语 → 添加到电台聊天

* **可自定义：** 自由注册常用短语

**使用场景：**

* 战术呼叫：即时发送"敌人来了""需要治疗""集合"

* 标准问候：一键发送"GG""谢谢""收到"

* 游戏过程中：无需打字即可快速沟通

* 外语VC：即时发送预先准备的英语短语

**使用方法：**

1. 在历史记录窗口查看过去的短语

2. 右键点击常用短语 → "添加到电台"

3. 游戏中按热键或使用叠加层发言

4. 立即TTS朗读 → 发送到VC

---

### 🎧 听力功能（实验性 - WIP）

从Discord、VRChat、游戏内VC等实时转录桌面音频（系统输出）。在屏幕上显示其他玩家的发言。

**特点：**

* 叠加层显示：叠加在游戏画面上

* 多语言支持：自动识别100+种语言

* 可自定义：字体大小、背景色、透明度、位置、历史记录大小、显示器选择

**使用场景：**

* 外语VC中的沟通：实时确认发言内容

* 防止漏听：事后查看快速指示和战术呼叫

* 作为字幕：在难以听清的环境中理解内容

* 作为记录：在历史记录中保留重要对话

**注意：** 此功能为实验性质。识别精度和稳定性计划在将来改进。自动翻译等功能目前正在开发中。

---

### 说话人验证（仅识别您的声音）

使用MFCC（梅尔频率倒谱系数）说话人验证，仅识别您的声音，忽略他人声音或环境声音。防止误识别，仅发送预期的发言。

**使用场景：**

* 忽略同住者声音：不拾取家人对话

* 忽略游戏音频：不拾取游戏内NPC或BGM

* 忽略直播音频：不拾取直播软件音频

* 提高准确性：可靠地仅识别您自己的发言

**初始设置：**

首次启动时只需说几次话即可注册您的声纹。之后自动仅识别您的声音。

---

### 适配游戏VC节奏的设计

不是用于长句，而是用于短反应和呼叫。笑声、认可、战术短语等，不破坏多人游戏的"节奏"。

**预设功能：**

* 笑声：自动将"哈哈""笑"转换为笑声

* 认可：自然的认可如"嗯""对对"

* 战术短语：注册到电台聊天以即时发送

---

### 轻量 & 离线操作

通过Whisper.cpp进行本地识别，低延迟操作，不依赖互联网。（*体验因环境而异）

**CPU版本：**

* 标准包含，无额外费用

* 在Intel/AMD CPU上工作

* 低延迟，稳定操作

**GPU版本（DLC）：**

* 使用Vulkan兼容GPU加速

* 更低延迟，舒适操作

* AMD、NVIDIA、Intel Arc兼容

---

### 支持3种TTS引擎

支持3种TTS引擎，实现更清晰、更自然的语音输出。

**VoiceVox（日语）：**

* 免费、高质量日语TTS

* 从多个角色语音中选择

* 可表达情感

**Voiceger（5种语言）：**

* **支持语言：** 日语、英语、中文（简体）、韩语、粤语

* 新一代TTS引擎

* 更自然的发音

* 低延迟、高质量

* 适合全球多人VC

**XTTS（多语言，实验性）：**

* 支持100+种语言

* 自定义语音反应

* 外部API集成（需要单独设置）

* *不包含XTTS。详情请查看GitHub

---

### 自定义（忽略列表 / 字典过滤器 / 良好列表）

删除填充词并根据您的喜好调整措辞。调整功能让您以"您的方式"继续使用。

**忽略列表：**

* 删除填充词如"呃""嗯"

* 自动排除不需要的识别结果

**字典过滤器：**

* 缩短转换如"收到" → "收"

* 自动纠正游戏特定术语

**良好列表：**

* 注册常用短语

* 通过电台聊天集成快速发送

---

## 🎮 工作流程

### 正常语音识别：

1. 对着麦克风说话

2. WhispTalk在本地识别语音（说话人验证仅识别您的声音）

3. 将识别结果作为匿名语音播放

4. 通过虚拟音频连接到Discord、VRChat、各种多人游戏

### 电台聊天：

1. 从历史记录或设置注册预设短语

2. 游戏中按热键（例如Ctrl+1）

3. 立即TTS朗读 → 发送到VC

---

## 🔒 注重隐私（零云端）

本软件不会将语音或文本数据发送到外部。所有处理都在您的PC上完成。不依赖云服务，完全保护隐私。

**什么是零云端：**

* 绝不发送到云端

* 语音数据留在PC上

* 100%隐私保护

* 无需互联网连接（可离线操作）

---

## ⚡ GPU加速包（DLC）

基础版在CPU上工作，但引入DLC可将繁重处理卸载到Vulkan兼容GPU。推荐给希望低延迟和更舒适使用的用户。

**兼容GPU：**

* AMD Radeon（Vulkan兼容）

* NVIDIA GeForce（Vulkan兼容）

* Intel Arc（Vulkan兼容）

**效果：**

* 识别速度提高3倍

* 更低延迟以改善实时性能

* 降低CPU负载

---

## ⚠️ 注意事项 & 限制

* 识别精度因环境噪音和说话模式而异

* 本工具用于短反应和简单呼叫，不适用于长篇转录或会议记录

* 说话人验证在环境噪音高时精度可能降低

* 听力功能为实验性质，识别精度和稳定性计划在将来改进

---

## 💡 MobMate WhispTalk 适合谁

在多人VC中，不仅是"我能说话吗"，还有"我现在应该说话吗"。

* 现在想不说话也能参与

* 不想加入VC但想保持存在感

* 想在不分享过多个人信息的情况下游戏

* 想在优先考虑隐私的同时使用语音聊天

* 说话困难的情况：深夜游戏、与家人同住、直播中、身体不适

* 想在外语VC中沟通（Voiceger支持5种语言）

* 想快速发送战术呼叫和预设短语（电台聊天）

MobMate WhispTalk 是一款无需使用真实声音即可自然地继续参与语音聊天的工具。

**安静的玩家也可以很响亮。** 即使是安静的参与也应有清晰的声音。

---

## 🌐 兼容平台

兼容Discord、VRChat和其他多人游戏。与虚拟音频设备（VB-Audio VoiceMeeter等）结合使用，可用于任何语音聊天应用。

**已确认工作：**

* Discord

* VRChat

* 其他支持虚拟音频设备的游戏

---

## 🌍 多语言UI支持

UI支持日语、英语、中文（简体/繁体）、韩语。

---

## 📚 支持 / 技术信息

源代码和技术信息发布在GitHub：

**Discord社区：**

本产品包含whisper.cpp（MIT许可证）

AI 生成内容披露

开发者对其游戏如何使用 AI 生成内容的描述如下：

This application uses AI technologies for real-time speech recognition, optional translation, and voice synthesis during gameplay.

User voice input is processed locally or via optional AI models to generate text and synthesized speech. No personal data is stored or shared without user consent.

AI is also used for some pre-generated assets such as icons or promotional images.