返回博客

Whisper 模型怎么选:音记AI模型指南

音记AI 的本地转录可选多档 Whisper 模型。这篇按应用内实际提供的模型,讲清楚 Tiny 到 Large-v3 Turbo、英文专用版、中文社区版和量化版怎么选,不同套餐能用哪些,以及怎样用自己的录音做对比。

Whisper模型选择本地转录GPU 加速

先说结论

  • 不知道选什么:先用 Small。
  • 想要更准、电脑还不错:用 Large-v3 Turbo。
  • 电脑比较老,或者只想快速看一眼内容:用 Tiny 或 Base。
  • 只处理英文:可以比较英文专用版(带 English 后缀)和多语言版。
  • 中文为主:可以试 Large-v3 中文,或者 SenseVoice、Qwen3-ASR 这类非 Whisper 模型。

下面是理由和细节。

官方模型一览

音记AI 的文件转录使用多档 Whisper 模型。以下文件大小来自应用内的模型配置:

模型文件大小适合场景
Tiny80MB快速预览、老款电脑、确认音频能不能转
Base150MB短音频、临时笔记
Small500MB日常会议、课程、访谈的起点
Medium1.5GB更看重准确率、音频条件复杂
Large-v22.9GB需要和旧版结果保持一致时
Large-v33.1GB质量优先、长期保存的材料
Large-v3 Turbo1.6GB接近大模型的效果,速度更快

Tiny、Base、Small、Medium 还各有一个英文专用版,文件大小相同。

文件大小不等于运行时占用的内存或显存。实际速度还取决于电脑、加速方式、线程数、音频长度和音频质量。

社区模型

Pro 套餐还可以用一批社区模型:

模型文件大小特点
Large-v3 中文3.1GB中文社区微调版,中文准确率最高
Large-v3 Turbo Q5547MBLarge-v3 Turbo 的量化版,体积小很多
Distil Small / Medium / Large-v2 英文336MB 到 1.52GB蒸馏版英文模型,更快
Distil Large-v31.52GBLarge-v3 的蒸馏版(实际下载的是 distil-large-v3.5,仅支持英文)

量化版(Q5)用更低的数值精度存储模型,体积和内存占用更小,准确率可能略有下降。值不值得,用自己的录音比一下最清楚。

来源:Large-v3 中文来自 BELLE-2/Belle-whisper-large-v3-zh;Large-v3 Turbo Q5 来自 whisper.cpp 官方模型仓库;Distil 系列来自 distil-whisper。

不同套餐能用哪些

套餐可用的 Whisper 模型GPU 加速
免费版Tiny、Base、Small(含英文版)不可用
Standard全部 11 个官方模型可用
Pro / 终身版官方模型加全部社区模型可用

以价格页和应用内提示为准。

各档模型怎么用

Tiny:快速试水。 准确度不适合正式校稿,但资源占用低,适合先确认音频能不能转、语言识别对不对。

Base:轻量任务。 比 Tiny 好一档。干净的短音频可以用;嘈杂、口音重、术语多的录音,建议升级到 Small 或 Medium。

Small:大多数人的起点。 文件大小适中,适合日常会议、课程和访谈。主要的取舍是复杂音频下可能漏掉细节。

Medium:追求准确率。 适合背景噪声多、多人对话的录音。代价是更慢、占用更多资源。

Large-v3:质量优先。 适合「转一次、长期保存」的材料,比如访谈归档、研究资料。

Large-v3 Turbo:大多数情况下的更优解。 文件只有 Large-v3 的一半左右,速度更快,适合想要大模型效果、又不想等太久的人。

让应用按你的电脑推荐

首页顶部有「性能检测」。它用一段约 35 秒的英文样本,分别跑一次 Whisper Base 和一个轻量实时模型,记录转录速度、错误率和 CPU、GPU 占用,再结合你的硬件(芯片、显卡、显存、内存)给出建议:

  • 加速方式:Apple Silicon 用 Metal,NVIDIA 显卡用 CUDA,AMD 独立显卡用 Vulkan;Intel Mac、只有核显的 Windows 电脑和虚拟机用 CPU。如果 GPU 实测反而很慢,会退回 CPU。
  • 文件转录用哪个 Whisper:只在 Tiny、Base、Medium、Large-v3 里挑。两项实测都表现很好、并且走 GPU 时,才会推荐 Medium 或 Large-v3(显存、内存、芯片代际越高越倾向 Large-v3);多数电脑会推荐 Base;实测吃力的电脑推荐 Tiny。
  • Whisper 还是轻量模型:如果轻量模型在你的电脑上明显更快、错误率又差不多,文件转录会改为推荐它。实时转录则相反,只有 Whisper 在你的电脑上又快又准、CPU 也不吃紧时才推荐 Whisper,否则推荐轻量实时模型。

检测完可以点「应用推荐配置」一键套用。之后在模型列表里,推荐的模型会带「推荐」标记,明显超出电脑能力的 Whisper 模型会有提醒。推荐的模型不在你的套餐里时,选套餐内最接近的一档。推荐只是起点,最终还是用自己的录音试一下。

硬件建议

Apple Silicon Mac(M1 及以后)。 优先从 Small 或 Large-v3 Turbo 开始。经常处理长录音的话,先用同一段样本在本机测一下,再决定是否长期用 Medium 或 Large-v3。

Windows 加 NVIDIA 显卡。 在付费套餐里开启 GPU 加速,可以选 CUDA 或 Vulkan。CUDA 对驱动和显卡型号有要求,详见 NVIDIA 显卡与 CUDA 兼容性。

没有独立显卡的电脑。 优先 Tiny、Base、Small。更大的模型能跑,但等待时间可能超出你的接受范围。Standard 及以上也可以试 SenseVoice 或 Moonshine 这类非 Whisper 模型,它们在 CPU 上就很快。

GPU 设置的详细说明见 GPU 转录文档。

实测数据

我们已经把 Whisper 的各个尺寸和本地其它模型放在同一套语料上跑过一轮,完整数据见本地语音识别模型实测。要判断哪个模型适合你的录音,最可靠的仍然是用自己的素材比较。

怎么用自己的录音比较

不要把网上某个词错率直接套到自己的场景。口音、噪声、麦克风、码率和专业术语都会影响结果。

  1. 挑一段 2 到 3 分钟、最能代表你工作的录音。
  2. 分别用 Small、Large-v3 Turbo 和 Large-v3 转一遍。
  3. 用同一套标准数前一分钟的错误:错字、漏字、多字。
  4. 记下每次的耗时,用耗时除以音频时长,得到你电脑上的实时率。
  5. 选错误能接受、等待也能接受的那个。

多语言和英文专用

如果音频不是纯英文,优先用多语言模型。只处理英文时,可以比较英文专用版和多语言版的效果,英文专用版在一些场景下更稳。

中文为主的用户,除了 Whisper,还可以试 Whisper 之外的本地模型。SenseVoice 速度快、中文效果好(Standard 起),Qwen3-ASR 准确率更高但更慢(Pro)。三类模型的关系见模型与引擎总览。

常见问题

模型下载后放在哪里? 在应用的模型目录里,可以在设置中管理和删除。不用的模型删掉可以释放空间。

换模型后旧的转录会变吗? 不会。已完成的转录保持不变,新任务用新模型。

为什么大模型反而错得更多? 少数情况下,大模型在静音或噪声段会「补出」原文没有的内容。可以开启 VAD 等参数,或换一档模型对比。参数说明见分引擎参数说明。

相关阅读

音记AI
Whisper大模型驱动 - 音视频秒转文字,声波流式转录,让每个声音都成篇章

Link

Legal

Contact us

Email

收录于

  • Fazier 推荐收录
  • Twelve Tools 推荐收录
  • ToolPilot.ai 推荐收录
Copyright © 2026. Made by AudioNote, All rights reserved.