语音研发采集实验室:参考人声与设备录音怎样分别规划
语音识别、降噪或会议产品的研发团队建设采集实验室时,宜先确定要交付什么录音:是便于听清说话内容的参考人声,还是目标设备在实际距离和房间条件下收到的声音。如果两种都需要,就应在方案阶段分别安排采集通道、布置和文件记录,而不是录完以后才想办法补一份参考。
本文讨论用于研发的语音数据采集空间,不是音乐制作棚,也不是一套语音产品认证方案。
把录音用途写进建设任务书
例如,团队想比较不同降噪处理对同一句话的影响,可能需要保留相对清晰的人声作参考;想研究会议设备在远处怎样拾音,则需要记录声音经过房间、到达目标设备后的状态。这些是不同的数据用途,房间与设备应据此安排。
慕尼黑大学的语料采集手册把声学环境、说话者的活动,以及麦克风类型、数量、位置和距离列为采集方案要明确的内容。[1] 询价时,可把需求写成一句具体任务:谁在什么位置说话,哪些设备同时录音,最后要拿到哪些文件。
“录音清楚”还不够具体。还应说明单人朗读还是多人对话,坐着还是允许走动,录单独音轨还是混合后的声音。这样才能讨论房间布局与采集配置,而不是先按人数选一个隔音房,再补使用要求。
参考人声与目标设备录音,可以分别保留
如果需要对照同一次说话,建议把参考麦克风和目标设备的录音分别保存。近讲参考有助于核对内容,但也可能包含呼吸、衣物摩擦或佩戴变化,不能直接称为完全无噪声的“真值”。
AMI会议语料库的公开介绍展示了近讲和远场麦克风等多种信号按共同时间线记录的做法。[2] 这个实例说明,同一次活动可以保留不同位置的声音;它并不要求新实验室照搬该项目的设备数量。
采购方应问清目标设备能输出什么:独立麦克风通道、已经处理过的声音,还是只能导出会议软件录音。若研发需要原始通道,而设备只输出处理结果,这项缺口不是换一间更安静的房就能补上。需要逐段对照时,还应约定各路录音如何对应同一次活动,并用实际文件验证。
按数据用途决定房间要保留多少环境声音
如果任务是采集尽量少受房间和背景声影响的人声,就应重点控制无关噪声和过多反射。Microsoft的定制语音录制指南强调避免背景噪声和回声、保持录制一致性。[3] 这是其语音服务的具体指导,不能直接当成所有语音实验室的统一验收标准。
如果任务是研究会议或家庭场景,房间对声音的影响可能正是需要保留的部分。此时宜明确桌椅布置、说话位置和背景设备状态,而不是把全部环境声音都作为瑕疵删除。
两类任务都需要时,可以评估分时使用同一空间、切换布置或分别设置采集区域。选择应看条件能否恢复、两类任务是否会同时进行,以及人员和设备如何周转。不能仅凭“一间可调房间”就认定所有数据采集任务都已覆盖。
先试录一小组,再确定整套交付
建议在方案演示或交付检查时,完成一组短录音:按任务摆位、检查通道、录制、导出,再由实际使用数据的研发人员打开文件核对。重点看三件事:
- 文件能否区分参考录音、目标设备录音与后续处理版本。
- 录音能否对应到说话者编号、位置、设备设置和当次任务。
- 出现漏录、过载、错读或位置变化时,是否有明确记录和补录办法。
人员授权、录音用途、访问范围和保存安排也宜在采集前明确;涉及人声模型训练,应另核相应授权。不要为了补一个真实场景,随手收集不知情人员的对话。
实验室工程、采集设备与数据处理分别由谁负责,应写清交付边界。房间符合约定指标、采集流程能输出可用文件,与语音算法最终达到什么效果,是不同层次的验证。先让研发团队确认一组数据真正可用,再确定空间和系统的配置,建设方案才有明确的落点。
参考资料
[1] 慕尼黑大学语音学与语音处理相关项目,BITS语料采集手册,Recording Setup。公开研究方法资料,2004年;引用其采集方案要素,不把它当作现行强制标准。
https://www.phonetik.uni-muenchen.de/Forschung/BITS/TP1/Cookbook/node54.html
[2] AMI项目,AMI Corpus Overview。公开语料库说明,介绍近讲与远场信号等共同时间线记录;仅作公开采集实例。
https://groups.inf.ed.ac.uk/ami/corpus/overview.shtml
[3] Microsoft Learn,Recording voice samples for custom voice。引用录音一致性、背景噪声及回声控制的指导,不引用平台参数作为通用房间指标。
https://learn.microsoft.com/en-us/azure/ai-services/speech-service/record-custom-voice-samples