LLM 後修正處理方法

Raw ASR

直接將結果吐出，不進行修正

Zero-shot

你是一位語音辨識後處理專家。請修正以下 ASR 假設文本中的錯誤，
輸出最可能的正確轉錄。請保持原有的中文與英文混用結構，不要新增或刪除語言。

ASR hypothesis: {hypothesis}

• Ma et al., 2023. Can Generative Large Language Models Perform ASR Error Correction?arXiv:2307.04172. https://arxiv.org/abs/2307.04172
• Wan et al., 2023. New Datasets and Controllable Iterative Data Augmentation Method for Code-switching ASR Error Correction. Findings of EMNLP 2023. https://aclanthology.org/2023.findings-emnlp.543/

Few-shot

給 LLM 範例進行修正

你是一位語音辨識後處理專家。以下是幾個中英混語 ASR 修正範例，請學習「保留英文詞、只修明顯錯誤、不改寫混語結構」的風格，然後修正最後一個 ASR 假設。

   Example 1:
   ASR hypothesis: Oregon friends chan chan message
   Corrected transcription: 偶尔跟friends传传messages

   Example 2:
   ASR hypothesis: 所以就会喝一些辣椒
   Corrected transcription: 所以就会喝一些latte

   Example 3:
   ASR hypothesis: 那个ignomic status就买不买得起这个 smartphone 跟小朋友如果买得起的话我觉得
   Corrected transcription: 那个economic status就买不买得起这个smartphone给小朋友如果买得起的话我觉得

   ASR hypothesis: {目前要修的句子}

• Ma et al., 2023. Can Generative Large Language Models Perform ASR Error Correction?arXiv:2307.04172. https://arxiv.org/abs/2307.04172
• Wan et al., 2023. New Datasets and Controllable Iterative Data Augmentation Method for Code-switching ASR Error Correction. Findings of EMNLP 2023. https://aclanthology.org/2023.findings-emnlp.543/
• Chen et al., 2023. Generative Error Correction for Code-Switching Speech Recognition Using Large Language Models. arXiv:2310.13013. https://arxiv.org/abs/2310.13013
   

Language-preserving prompt

保留所有英文，禁止把英文翻成中文。

你是一位語音辨識後處理專家。任務：修正以下 ASR 假設文本中的錯誤。
重要限制：
  1. 這段話是中文與英文混用（code-switching）。
  2. 你必須保留所有英文詞，禁止把英文翻譯成中文。
  3. 你必須保留中文與英文交錯出現的順序與結構。
  4. 只修正明顯的辨識錯誤（例如錯字、漏字、多字、英文拼寫錯誤）。
  5. 不要新增額外內容，不要改寫語意。

  ASR hypothesis: {hypothesis}

Detect-then-correct

先偵測可能的錯誤，第二步再進行修正，2 次 LLM Call。

- 只標真正可疑的片段：
    - 錯字
    - 漏字
    - 多字
    - 英文拼寫錯誤
    - 語意不通處
- 禁止把正確英文詞標成錯誤
- 禁止要求翻譯成中文
- 若沒有可疑片段，回傳空陣列
- 輸出 JSON array，例如：

 ```json
  [
    {"span": "可疑片段", "reason": "原因"}
  ]
```

第二步進行修正

- 只修正列出的可疑片段
- 其餘文字必須保持不變
- 保留所有英文詞
- 禁止英文翻中文
- 保留中英交錯順序與結構
- 輸出完整修正後 transcript

Detect-correct-verify

接續上一個方法，找可疑的錯誤，針對錯誤進行修正，最後再次驗證是否過度修正，如果判斷過度修正就 fallback。LLM 自我驗證。

1. 第一次 Call 查看是否有可能的錯誤
2. 第二次 Call 進行修正
3. 第三次 Call 檢查是否有過度修正

• Fang et al., 2025. Fewer Hallucinations, More Verification: A Three-Stage LLM-Based Framework for ASR Error Correction arXiv:2505.24347. https://arxiv.org/abs/2505.24347

Conservative fallback

使用 Language-preserving prompt，小範圍的英文修正保留，若破壞整個結構進行 fallback。

Multi-candidate adjudication

把多個產生的結果組合起來(raw, few-shot, preserve, Conservative)，另一個 LLM 當作裁判從中選擇一個，不能自由產生。