TIOBE 重要更新&致歉(直播带货、直播王者荣耀、老罗语录)
6月份我们发布了 直播：王者荣耀(张大仙&骚白)，直播：带货(李佳琦&薇娅)，老罗语录 三个场景领域的测试集及评测结果。本月初对结果分析过程中，我们发现这三个测试集中的部分语音标注存在时间戳偏差。经过近一个月的人工检查和标注检验，我们对问题…
10 0 0
声浪
TIOBE 滚动测试报: 2020.06
更新日志 新加入场景： 直播 带货 直播 王者荣耀 老罗语录 平台： 去掉谷歌：往期测试表明谷歌在中文领域的性能没有参考性，且其费用超过其余所有平台调用费用之和。 临时加入"阿里+"(阿里云的新算法预发试用版)，同时并行测试公网正式版"阿里…
13 0 0
TIOBE 场景测试：老罗语录
素材来源 Bilibili哔哩哔哩 老罗语录 我们搜罗并爬取了老罗在新东方讲课时期的录音，即[老罗语录]。从中选取了一部分相对清晰的音频，累计约 3.5 小时原始音频 素材示例： https://www.bilibili.com/video…
9 0 0
TIOBE 场景测试：直播 带货
素材来源 YouTube 李佳琪官方频道 & 薇娅官方频道 我们爬取了李佳琪和薇娅的日常带货直播录像，共计约 3.5 个小时 因为场景较复杂，标注过程中我们有一些处理原则，来确保测试集准确性： 当存在明显的多人同时说话，抢话时，该句丢弃。…
13 0 0
TIOBE 场景测试：直播 王者荣耀
素材来源 YouTube 张大仙团队官方频道 & 骚白团队官方频道 我们爬取了张大仙 & 骚白的日常直播录像，从中抽取了共计14局直播对局，共计时长约5小时。 素材示例： https://www.bilibili.com/video/BV1…
13 0 0
TIOBE 滚动测试报告：2020.05
更新日志 新加入语音平台： 创业公司 S 新加入场景： 天下足球 世界杯往事 罗振宇 跨年演讲 李永乐老师 在线讲堂 测试框架： 修复搜狗知音平台多句结果的解析bug 新增测试： 全厂商 × 全场景 滚动刷新 滚动测试
9 0 0
TIOBE 场景测试：李永乐老师 在线讲堂
素材来源 YouTube 李永乐老师官方频道 我们从李永乐老师的在线讲堂视频中，选取了15期节目，原始音频共计约4.5个小时 在选取过程中，我们有一定的偏向性： 李永乐老师的部分视频涉及大量的数学公式，我们刻意排除了该类视频。因为纯数学、物…
10 0 0
TIOBE 场景测试：罗振宇 跨年演讲
素材来源 YouTube 罗振宇跨年演讲 我们爬取了罗振宇历年的跨年演讲，并选择了一期作为测试素材，共计约3.5个小时原始音频 场景示例： https://www.bilibili.com/video/BV1tJ411b71Z?share_…
9 0 0
TIOBE 场景测试：天下足球 世界杯往事
素材来源 YouTube 天下足球 世界杯专题《世界杯往事》 该系列节目中有部分内容有 FIFA 地域限制，我们抓取了不受播放限制的所有部分，共计约4小时的原始音频 场景特点 环境 节目背景音乐噪声 球场噪声：观众欢呼声、哨声、触球声等 拾…
14 0 0
SpeechIO TIOBE 滚动测试报 2020.04
说明及更新 滚动测试目的： 在时间轴持续记录各服务的性能表现，形成历史数据。 避免一次性测试带来的偶然偏差和结论，及时体现各服务最新迭代的性能水平。 及时发布因新增测试集、测试框架中细节参数调整带来的性能变化。 本期新加入语音平台： 微软…
88 0 0