补充阅读和资源

如果您想进一步探索不同的 Transformer 架构，并了解它们在语音处理中的各种应用，请查阅这篇最近的论文：

语音处理中的 Transformer：一项综述

作者：Siddique Latif, Aun Zaidi, Heriberto Cuayahuitl, Fahad Shamshad, Moazzam Shoukat, Junaid Qadir

“Transformer 在自然语言处理领域的卓越成功激发了语音处理界的兴趣，促使人们探索其在语音序列中建模长距离依赖的潜力。最近，Transformer 在各种语音相关领域获得了突出地位，包括自动语音识别、语音合成、语音翻译、语音副语言学、语音增强、语音对话系统以及众多多模态应用。本文旨在提出一项全面的综述，旨在弥合语音技术中不同子领域的研究。通过整合语音技术领域的研究成果，我们为对利用 Transformer 的力量来推动该领域感兴趣的研究人员提供了宝贵的资源。我们指出了 Transformer 在语音处理中遇到的挑战，同时还提供了解决这些问题的潜在解决方案的见解。”

arxiv.org/abs/2303.11607

< > 在 GitHub 上更新