關於此軟體

MobMate WhispTalk 是一款專為遊戲語音聊天設計的零雲端語音輔助工具包。

它不是為「無法說話」的人而設計——而是為那些選擇在當下不說話，尊重場合氛圍和距離感的人而創建。

無需使用真實聲音，就能保持在語音聊天的圈子裡。只在需要時，簡短、自然地表達。

與雲端服務不同，所有語音處理都在您的PC上完成（零雲端）。您的語音和文字絕不會發送到外部,優先保護隱私。

---

## 🧠 主要功能

### 即時語音辨識 & 匿名語音輸出

在本機轉錄您的語音，並以匿名語音播放。無需使用真實聲音，即可在對話中留下您的反應和回應。

**使用場景：**

* 深夜遊戲：不吵醒家人也能參與VC

* 直播中：不向觀眾暴露真實聲音也能溝通

* 身體不適：喉嚨疼痛時也能繼續語音聊天

* 注重隱私：保護聲紋和個人資訊的同時參與

---

### 📻 電台聊天（Radio Chat）

透過全域熱鍵或疊加層即時發送預設短語和常用表達。

**特點：**

* **全域熱鍵支援：** 遊戲中無需Alt+Tab即可發言

* **疊加層顯示：** 疊加在遊戲畫面上，滑鼠點擊即可發送

* **從歷史記錄輕鬆註冊：** 右鍵點擊過去的短語 → 新增到電台聊天

* **可自訂：** 自由註冊常用短語

**使用場景：**

* 戰術呼叫：即時發送「敵人來了」「需要治療」「集合」

* 標準問候：一鍵發送「GG」「謝謝」「收到」

* 遊戲過程中：無需打字即可快速溝通

* 外語VC：即時發送預先準備的英語短語

**使用方法：**

1. 在歷史記錄視窗查看過去的短語

2. 右鍵點擊常用短語 → 「新增到電台」

3. 遊戲中按熱鍵或使用疊加層發言

4. 立即TTS朗讀 → 發送到VC

---

### 🎧 聽力功能（實驗性 - WIP）

從Discord、VRChat、遊戲內VC等即時轉錄桌面音訊（系統輸出）。在螢幕上顯示其他玩家的發言。

**特點：**

* 疊加層顯示：疊加在遊戲畫面上

* 多語言支援：自動識別100+種語言

* 可自訂：字型大小、背景色、透明度、位置、歷史記錄大小、顯示器選擇

**使用場景：**

* 外語VC中的溝通：即時確認發言內容

* 防止漏聽：事後查看快速指示和戰術呼叫

* 作為字幕：在難以聽清的環境中理解內容

* 作為記錄：在歷史記錄中保留重要對話

**注意：** 此功能為實驗性質。識別精度和穩定性計劃在將來改進。自動翻譯等功能目前正在開發中。

---

### 說話者驗證（僅識別您的聲音）

使用MFCC（梅爾頻率倒譜系數）說話者驗證，僅識別您的聲音，忽略他人聲音或環境聲音。防止誤識別，僅發送預期的發言。

**使用場景：**

* 忽略同住者聲音：不拾取家人對話

* 忽略遊戲音訊：不拾取遊戲內NPC或BGM

* 忽略直播音訊：不拾取直播軟體音訊

* 提高準確性：可靠地僅識別您自己的發言

**初始設定：**

首次啟動時只需說幾次話即可註冊您的聲紋。之後自動僅識別您的聲音。

---

### 適配遊戲VC節奏的設計

不是用於長句，而是用於短反應和呼叫。笑聲、認可、戰術短語等，不破壞多人遊戲的「節奏」。

**預設功能：**

* 笑聲：自動將「哈哈」「笑」轉換為笑聲

* 認可：自然的認可如「嗯」「對對」

* 戰術短語：註冊到電台聊天以即時發送

---

### 輕量 & 離線操作

透過Whisper.cpp進行本機識別，低延遲操作，不依賴網際網路。（*體驗因環境而異）

**CPU版本：**

* 標準包含，無額外費用

* 在Intel/AMD CPU上工作

* 低延遲，穩定操作

**GPU版本（DLC）：**

* 使用Vulkan相容GPU加速

* 更低延遲，舒適操作

* AMD、NVIDIA、Intel Arc相容

---

### 支援3種TTS引擎

支援3種TTS引擎，實現更清晰、更自然的語音輸出。

**VoiceVox（日語）：**

* 免費、高品質日語TTS

* 從多個角色語音中選擇

* 可表達情感

**Voiceger（5種語言）：**

* **支援語言：** 日語、英語、中文（簡體）、韓語、粵語

* 新一代TTS引擎

* 更自然的發音

* 低延遲、高品質

* 適合全球多人VC

**XTTS（多語言，實驗性）：**

* 支援100+種語言

* 自訂語音反應

* 外部API整合（需要單獨設定）

* *不包含XTTS。詳情請查看GitHub

---

### 自訂（忽略清單 / 字典過濾器 / 良好清單）

刪除填充詞並根據您的喜好調整措辭。調整功能讓您以「您的方式」繼續使用。

**忽略清單：**

* 刪除填充詞如「呃」「嗯」

* 自動排除不需要的識別結果

**字典過濾器：**

* 縮短轉換如「收到」 → 「收」

* 自動校正遊戲特定術語

**良好清單：**

* 註冊常用短語

* 透過電台聊天整合快速發送

---

## 🎮 工作流程

### 正常語音辨識：

1. 對著麥克風說話

2. WhispTalk在本機識別語音（說話者驗證僅識別您的聲音）

3. 將識別結果作為匿名語音播放

4. 透過虛擬音訊連接到Discord、VRChat、各種多人遊戲

### 電台聊天：

1. 從歷史記錄或設定註冊預設短語

2. 遊戲中按熱鍵（例如Ctrl+1）

3. 立即TTS朗讀 → 發送到VC

---

## 🔒 注重隱私（零雲端）

本軟體不會將語音或文字資料發送到外部。所有處理都在您的PC上完成。不依賴雲端服務，完全保護隱私。

**什麼是零雲端：**

* 絕不發送到雲端

* 語音資料留在PC上

* 100%隱私保護

* 無需網際網路連接（可離線操作）

---

## ⚡ GPU加速包（DLC）

基礎版在CPU上工作，但引入DLC可將繁重處理卸載到Vulkan相容GPU。推薦給希望低延遲和更舒適使用的使用者。

**相容GPU：**

* AMD Radeon（Vulkan相容）

* NVIDIA GeForce（Vulkan相容）

* Intel Arc（Vulkan相容）

**效果：**

* 識別速度提高3倍

* 更低延遲以改善即時效能

* 降低CPU負載

---

## ⚠️ 注意事項 & 限制

* 識別精度因環境噪音和說話模式而異

* 本工具用於短反應和簡單呼叫，不適用於長篇轉錄或會議記錄

* 說話者驗證在環境噪音高時精度可能降低

* 聽力功能為實驗性質，識別精度和穩定性計劃在將來改進

---

## 💡 MobMate WhispTalk 適合誰

在多人VC中，不僅是「我能說話嗎」，還有「我現在應該說話嗎」。

* 現在想不說話也能參與

* 不想加入VC但想保持存在感

* 想在不分享過多個人資訊的情況下遊戲

* 想在優先考慮隱私的同時使用語音聊天

* 說話困難的情況：深夜遊戲、與家人同住、直播中、身體不適

* 想在外語VC中溝通（Voiceger支援5種語言）

* 想快速發送戰術呼叫和預設短語（電台聊天）

MobMate WhispTalk 是一款無需使用真實聲音即可自然地繼續參與語音聊天的工具。

**安靜的玩家也可以很響亮。** 即使是安靜的參與也應有清晰的聲音。

---

## 🌐 相容平台

相容Discord、VRChat和其他多人遊戲。與虛擬音訊設備（VB-Audio VoiceMeeter等）結合使用，可用於任何語音聊天應用。

**已確認工作：**

* Discord

* VRChat

* 其他支援虛擬音訊設備的遊戲

---

## 🌍 多語言UI支援

UI支援日語、英語、中文（簡體/繁體）、韓語。

---

## 📚 支援 / 技術資訊

原始碼和技術資訊發佈在GitHub：

**Discord社群：**

本產品包含whisper.cpp（MIT授權）

AI 生成內容聲明

開發者針對他們的遊戲使用 AI 生成內容方式的說明如下：

This application uses AI technologies for real-time speech recognition, optional translation, and voice synthesis during gameplay.

User voice input is processed locally or via optional AI models to generate text and synthesized speech. No personal data is stored or shared without user consent.

AI is also used for some pre-generated assets such as icons or promotional images.