查看原文
其他

TIOBE 场景测试:短视频 产品开箱

SpeechIO SpeechIO 2022-02-26



SpeechIO TIOBE Benchmark

场景测试:短视频 产品开箱


SpeechIO TIOBE 历史文章回顾:

引篇

规范

场景测试:新闻联播

场景测试:鲁豫有约一日行

滚动测试报 2020.04

......

其它更多文章,请点击最顶部“专辑”阅读


场景:短视频 产品开箱


1素材来源

Youtube Zealer官方channel,随机爬取,原始时长约2小时

Youtube 无聊开箱官方channel,随机爬取,原始时长约2小时


开箱视频是长短视频平台中的重要类型,内容覆盖人们日常生活产品,又包含各种品牌名称、功能等专有词汇,是较有代表性的场景。


2场景特点

  • 环境

    • 多为室内

    • 有后期背景配乐

  • 拾音设备

    • 专业摄像机1-2米距离现场录制

    • 专业麦克风后期旁白补充制作

  • 说话人

    • 开箱人(王自如,无聊开箱主理人)

  • 说话方式

    • 语速中等稍快

    • 有底稿,穿插自由发挥描述

  • 方言

    • 普通话

  • 内容领域

    • 手机、手表、游戏机等电子产品

    • 家用电器等

    • 包含各种品牌(含英文)以及一些场景的专有词汇


3测试结果

测试时间:

本场景会进行定期重测(1-2个月),关注最新滚动测试报告查看最新结果。

CompanyPlatformAccuracy(%) = 1-CER
AISpeech思必驰95.91
Alibaba
阿里云96.14
Baidu百度智能云89.57
iFLYTEK讯飞开放平台91.46
Microsoft
Azure94.90
SogouAI开放平台95.11
Tencent腾讯云94.90
YITU Tech语音开放平台95.07

* 讯飞目前被低估,详见(SOTA)


4简评

开箱视频类型的内容中多混杂着产品品牌,性能度量,功能名称等英文词汇,从评测的结果分析中可以看到该部分的识别对于各厂家的最终结果影响较大。涉及专有名词的中英文混合,仍是语音识别技术实际应用中的难点。



欢迎转载,大家有什么好的建议和意见,可以通过后台私信提供给我们。

扫描下面二维码 或 微信搜索 SpeechIO,关注公众号。

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存