音频普通话

智能驾舱人机交互语音数据集-燃油车

智能驾舱人机交互语音数据集-燃油车

数据集介绍

一、产品概述

智能驾舱人机交互语音数据集共 613 小时。录音语言,中文;录音地区,中国。录音文本包含主流车载场景智能控制、命令等10个分类。以中国北方口音区域为主邀请300名发音人参与录制。录制过程在真实车载环境中,模拟自动驾驶点位,使用4个高保真麦克风(44.1kHz,16bit,122小时)与一部手机(16kHz,16bit,124小时)进行录制。此数据库经过专业语音校对人员转写标注,并通过严格质量检验,文本正确率在95%以上。

二、产品目录结构

目录结构

数据目录结构数据目录结构

└─DOC(文本说明文件)
││├─wav_list.txt(音频列表)
││├─content.txt(转写内容列表)
││├─spk_info.xlsx(录音人信息)
│
└─SPEECHDATA(数据文件夹)
│├─0001(录音人文件夹)
│├─CC0001A(录音人文件夹)
││ ││ CC0001A0001.wav(音频文件)
││ ││ CC0001A0001.txt(语音内容文本)

命名规则

<CORPUS_ID><SPEAKER_IC><WAV_NUM>e.g. CC0001A0001.wav

目录名称 · 内容 · 备注

CORPUS_ID · CC (Chinese in Car) · 数据库名称

SPEAKER_NUM · 0001 · 录音人ID

POINT_ID · A\B\C\D\F · 录音位ID

WAV_NUM · 0001 · WAV编号

三、文本设计

语料制作

考虑到语音识别在智能车载、无人驾驶领域的应用,语料在10个领域中选定。按照规则处理语料池。

序号 · 领域

1 · 唤醒类

2 · 高速公路信息

3 · 行政地理位置

4 · 命令、控制语句

5 · 数字串

6 · 音乐

7 · 收音机

8 · 空调

9 · 地图坐标位置

10 · 广域内容文本

  • 脱敏处理。删除政治敏感、个人隐私、色情暴力等内容。
  • 删除 < , > , [ , ] , ~ , / , \ , = 等符号。
  • 删除含有中文和英文以外语言的内容。
  • 删除单句含有25字以上的内容。
  • 统一格式。

文本结构

考虑到语音覆盖及音素平衡,此数据库录音文本采用每份508句的分配方式设计,从语料池中抽取,结构如下。

序号 · 领域 · 每份分配量/句

1 · 综合 · 50

2 · 唤醒类 · 48

3 · 高速公路信息 · 20

4 · 行政地理位置 · 30

5 · 命令、控制语句 · 35

6 · 数字串 · 40

7 · 音乐 · 30

8 · 收音机 · 30

9 · 空调 · 35

10 · 地图坐标位置 · 40

11 · 广域内容文本 · 50

合计 · 10项 · 508句

四、录制环境

录制现场

在车载环境中,设计7种不同场景,依次录制。车型包含3辆小型车、2辆中型车、1辆大型车。

场景环境编号 · 车速

A · 关闭引擎-> 市区慢速0-40km/h

B · 市区中速40-80km/h打开1/3副驾驶车窗

C · 高速80-120km/h关窗

D · 关闭引擎打开1/3副驾驶车窗 -> 市区慢速0-40km/h

E · 关闭引擎打开1/3驾驶员车窗 -> 市区慢速0-40km/h

F · 市区中速40-80km/h打开1/3副驾驶车窗

G · 市区中速40-80km/h打开1/3驾驶员车窗

场景内环境结合语料再分配为音乐开关、空调开关等辅助环境。

场景环境编号 · 车速 · 辅助环境

A · 关闭引擎-> 市区慢速0-40km/h · 音乐/空调

B · 市区中速40-80km/h打开1/3副驾驶车窗 · 音乐/空调

C · 高速80-120km/h关窗 · 音乐/空调

D · 关闭引擎打开1/3副驾驶车窗 -> 市区慢速0-40km/h · 音乐/空调

E · 关闭引擎打开1/3驾驶员车窗 -> 市区慢速0-40km/h · 音乐/空调

F · 市区中速40-80km/h打开1/3副驾驶车窗 · 音乐/空调

G · 市区中速40-80km/h打开1/3驾驶员车窗 · 音乐/空调

音乐和空调状态以组合形式再分为6组分配到语料中。

辅助环境 ·

空调状态 · 音乐状态

空调关闭 · 音乐关闭

空调关闭 · 音乐打开

低风空调打开 · 音乐关闭

低风空调打开 · 音乐打开

高风空调打开 · 音乐关闭

高风空调打开 · 音乐打开

录制设备

录制设备包括高保真麦克风和录音机、手机。本数据库数据存储格式为高保真录制数据44.1kHz、16bit单声道和手机录制数据16kHz、16bit单声道两种格式。舒伯乐superlux ECM999测试话筒

信息项 · 技术参数

音头 · 背驻极

指向性 · 无指向

频率响应 · 20-20000Hz

灵敏度 · -37 dBV/Pa(14 mV)

阻抗 · 200Ω

负载 · 1000Ω

信噪比 · 70 dB等效噪音SPL:24 dB

声压 · SPL: 132dB

动态范围 · 108 dB

动态范围 · 模数:100dB,数模:104dB

信息项 · 技术参数

通道 · 4

数据类型 · WAV/BWF

采样精度 · 16/24-bit

采样频率 · 44.1kHz/48kHz/88.2kHz/96kHz/192kHz

输入阻抗 · XLR:4K欧姆或更高(平衡),TRS:6K欧姆或更高(平衡)

输入 · +24dBu(输入灵敏度旋钮:+4dBu)

输出阻抗 · 线路输出:600欧姆

噪音 · 线路输出:-100dBu(输入灵敏度:+4dBu,输入音量:中间)

频率响应 · 20Hz-40kHz(0/-3dB)

动态范围 · 模数:100dB,数模:104dB

手机系统 · 手机型号

Android · 三星NOTE 4、三星S6、OPPO A33、OPPO A59s、华为荣耀畅玩6X

录制方法

车内环境下布置5个点位,包含2个近讲点位,3个功能点位。功能点位固定在驾驶员正前方、后视镜、中控台;近讲点位与发言人距离20厘米,包含一部高保真麦克风和一部手机。发音人以讲话正常音量,正常语速,朗读录音文本。

编号 · 位置 · 描述

A · 驾驶员(副驾驶模拟)正前方 · 高保真麦克风

B · 车顶 · 高保真麦克风

C · 中控台 · 高保真麦��风

D · 后视镜 · 高保真麦克风

F录音人前方手机

五、标注转写规范

数据转写人员根据所听到的音频写出内容,力求使文本内容与音频发音内容保持一致。准则如下:1)转写的内容必须和听到的语音完全一致,不能多字、少字、错字。2)数字要转写为汉字形式,如“一二三”,而不是“123”。注意区分“一”和“幺”,“二”和“两�����。3)句中出现的英���按照发音写出单词,如“thank you”。按拼读朗读的字母,需转写成大写��母加空格的形式。如,“N B A”、“U F O”。4)句中包含的符号,按实际发言人发音转写。如“三W点百度点com”。没有发音的符号,需要删掉。品牌名称,专有名称等按照实际惯用格式转写,如“QQ空间”、“iPhone”、“喜马拉雅”。5)标注内容的完整性要与实际发音一致,不得删减。

六、发音人信息

基本信息记录

发音人信息记录内容包括任务编号、性别、口音区域、年龄区间、籍贯。

任务编号 · 性别 · 口音区域 · 年龄区间 · 场景环境

1 · 男 · 北方 · A · 场景一

任务编号:每个发言人领取1个任务编号,每个任务编号对应1份录音文本。每个发言人只能参加一次录制。性别:男性,女性。口音区域:按照发言人原生语言所属区域,分为北方、南方、其他。年龄区间:A(16-25岁)、B(26-40岁)、C(41岁以上)。场景环境:

发音人结构特征

性别比例

数据库总人数为300人,男151人,女149人。

性别 · 男性 · 女性 · 合计

比例 · 50% · 50% · 100%

年龄比例

A(16-25岁)300人;B(26-40岁)6人;C(41岁以上)0人。

年龄区间 · 年龄段 · 人数 · 比例 · 男性 · 女性

A · 16-25岁 · 296 · 98.7% · 149 · 147

B · 26-40岁 · 4 · 1.3% · 2 · 2

C · >41岁 · 0 · 0% · 0 · 0%

合计 · · 300 · 100% · 151 · 149

方言区域比例

北方294人;南方8人;其它2人。

区域 · 人数 · 比例

北方 · 294 · 98.0%

南方 · 8 · 2.7%

其它 · 2 · 0.7%

合计 · 300 · 100%

数据样例下载

点击下载数据样例

样例

  • 音频样例 1