FunASR/docs_m2met2_cn/数据集.md
2023-04-13 15:09:04 +08:00

3.3 KiB
Raw Blame History

数据集

数据集概述

在限定数据集条件下训练数据集仅限于三个公开的语料库即AliMeeting、AISHELL-4和CN-Celeb。为了评估参赛者提交的模型的性能我们将发布一个新的测试集Test-2023用于打分和排名。下面我们将详细描述AliMeeting数据集和Test-2023测试集。

Alimeeting数据集介绍

AliMeeting总共包含118.75小时的语音数据包括104.75小时的训练集Train、4小时的验证集Eval和10小时的测试集Test。训练集和验证集分别包含212场和8场会议其中每场会议由多个说话人进行15到30分钟的讨论。训练和验证集中参与会议的总人数分别为456人和25人并且参会的男女比例人数均衡。

该数据集收集于13个不同的会议室按照大小规格分为小型、中型和大型三种房间面积从8到55平方米不等。不同房间具有不同的布局和声学特性每个房间的详细参数也将发送给参与者。会议场地的墙体材料类型包括水泥、玻璃等。会议场地的家具包括沙发、电视、黑板、风扇、空调、植物等。在录制过程中麦克风阵列放置于桌上多个说话人围坐在桌边进行自然对话。麦克风阵列离说话人距离约0.3到5.0米之间。所有说话人的母语均是汉语,并且说的都是普通话,没有浓重的口音。在会议录制期间可能会产生各种室内的噪音,包括键盘声、开门/关门声、风扇声、气泡声等。所有说话人在会议的录制期间均保持相同位置不发生走动。训练集和验证集的说话人没有重复。图1展示了一个会议室的布局以及麦克风的拓扑结构。

meeting room

每场会议的说话人数量从2到4人不等。同时为了覆盖各种内容的会议场景我们选择了多种会议主题包括医疗、教育、商业、组织管理、工业生产等不同内容的例会。训练集和验证集的平均语音重叠率分别为42.27%和34.76%。AliMeeting训练集和验证集的详细信息见表1。表2显示了训练集和验证集中不同发言者人数会议的语音重叠率和会议数量。

dataset detail Test-2023测试集由20场会议组成这些会议是在与AliMeeting数据集相同的声学环境下录制的。Test-2023测试集中的每个会议环节由2到4个参与者组成并且与AliMeeting测试集的配置相似。

我们还使用耳机麦克风记录了每个说话人的近场音频信号并确保只转录对应说话人自己的语音。需要注意的是麦克风阵列记录的远场音频和耳机麦克风记录的近场音频在时间上是同步的。每场会议的所有抄本均以TextGrid格式存储内容包括会议的时长、说话人信息说话人数量、说话人ID、性别等、每个说话人的片段总数、每个片段的时间戳和转录内容。

获取数据

以上提到的三个训练集均可以在OpenSLR下载. 参赛者可以使用下方链接直接下载. 针对AliMeeting数据集比赛提供的baseline中包含了完整的数据处理流程。