面向铁路领域的多方言免切换语音识别方法.pdfVIP

特别策划·人工智能大模型应用

面向铁路领域的

多方言免切换语音识别方法

111122

杨立鹏，胡从刚，陈华龙，韩可可，刘峰，张志科

（1.中国铁道科学研究院集团有限公司电子计算技术研究所，北京100081；

2.中国国家铁路集团有限公司客运部，北京100844）

摘要：随着铁路智能客服系统的持续发展，现有语音识别模型的准确率已达到较高水平，但

面对铁路领域术语和多样化方言场景，其语音识别效果仍然较差，因此提出1种融合铁路领域

知识的多方言免切换语音识别方法。基于RepVGG网络模型构建方言语种识别器，以获取语种

信息；对Transformer语音识别模型进行改进，通过在编码器中融合注意力机制的语种残差模块，

并在解码器中嵌入语种信息，以实现多方言免切换功能；基于LSTM网络模型在铁路文本语料

库上训练铁路领域专用的语言模型，并将其与改进的Transformer模型进行融合，以提升对铁路

术语的识别准确率；在自建数据集上对所提方法进行实验验证，结果表明：所提方法在粤语、

四川话和普通话上的识别准确率均超过90%，且有效提升对铁路领域术语的识别性能，具有

一定应用价值。

关键词：铁路领域语言模型；多方言；语音识别；RepVGG；Transformer；LSTM

中图分类号：U29-39；TP18；TP391.4文献标识码：A文章编号：1001-683X（2025）01-0030-10

DOI：10.19549/j.issn.1001-683x.2024.05.13.009

［1］

要。随着智能铁路概念的提出，人工智能技术在我

0引言

［2］

国铁路领域的应用日益广泛。铁路智能客服系统作

铁路是国民经济大动脉、关键基础设施和重大民为智能铁路系统的重要分支之一，其发展同样经历着

生工程，在我国经济社会发展中的地位和作用至关重前所未有的变革。该系统深度融合云计算、大数据、

人工智能等前沿技术，重新定义了旅客服务的边界与

基金项目：中国铁道科学研究院集团有限公司科研开发基金项目

（2023YJ132）质量。这一转变不仅提升了服务效率，更深刻地改变

第一作者：杨立鹏（1982—），男，副研究员。了旅客的出行体验，展现了数字时代铁路运输服务的

E-mail：ylp_1163.com

新面貌。铁路智能客服系统通过集成自然语言处理技

通信作者：胡从刚（1994—），男，工程师。

E-mail：2878187157@术和深度学习算法，能够实现与旅客的自然对话。无

-30-CHINARAILWAY2025/01

面向铁路领域的多方言免切换语音识别方法杨立鹏等特别策划

论是票务咨询、行程规划，还是即时的旅行信息更新，（3）基于铁路领域文本语料库，构建涵盖铁路专

该系统都能提供即时、准