FEATUREDHacker News 首页· rssEN16:06 · 07·13
实测苹果新语音 API:准确率超 Whisper Small,速度还快三倍
Inscribe 团队用 5,559 条标准语音样本,把苹果刚推出的 SpeechAnalyzer 跟老版 SFSpeechRecognizer 以及三个 Whisper 模型拉出来比了比。结果很直接:SpeechAnalyzer 在干净语音上的词错率只有 2.12%,嘈杂语音 4.56%,比 Whisper Small 分别低了 1.62 和 3.3...
#Benchmarking#Apple#OpenAI#Inscribe
精选理由
精选 · 重要度 78 · 吸引力 + 知识量 + 共鸣
一句话点评
苹果新语音 API 在干净和嘈杂场景下词错率都压过了 Whisper Small,速度还快三倍,但正文没披露模型架构和参数量。
锐评
Inscribe 团队拿 5,559 条标准语音样本,把苹果刚出的 SpeechAnalyzer 跟老版 SFSpeechRecognizer 和三个 Whisper 模型做了对比。结果很直接:SpeechAnalyzer 在干净语音上词错率 2.12%,嘈杂语音 4.56%,比 Whisper Small 分别低了 1.62 和 3.39 个百分点,速度还快三倍。老版 API 词错率 9.02%,连 40MB 的 Whisper Tiny 都不如。所有引擎都在一台 M2 Pro 上本地跑完,测试用的 LibriSpeech 数据集也是 OpenAI 当年公布 Whisper 成绩时用的,所以 Whisper 那栏数字可以跟官方数据互相验证,偏差都在 0.5 个百分点以内,说明测试方法靠谱。
这个结果对做英文语音转文字的产品挺有参考价值:如果你只做英文、跑在苹果设备上,SpeechAnalyzer 现在是精度最高的本地选项。但要注意两点:一是测试只覆盖了英文朗读语音,真实对话、口音、多人场景没测;二是苹果没公布模型大小和结构,开发者没法知道它为什么好、在什么条件下会翻车。Whisper 的优势在于语言覆盖广、跨平台,这两点 SpeechAnalyzer 还替代不了。Inscribe 自己已经把默认引擎切成了 SpeechAnalyzer,这个动作比数据更有说服力。
HKR 分解
hook ✓knowledge ✓resonance ✓