基本信息:
- 专利标题： 一种基于Swin-Transformer的语音语义信号传输方法
- 申请号：CN202310606682.X 申请日：2023-05-26
- 公开(公告)号：CN116665659A 公开(公告)日：2023-08-29
- 发明人： 周子良 , 郑仕链 , 赵知劲 , 陈杰
- 申请人： 杭州电子科技大学
- 申请人地址： 浙江省杭州市下沙高教园区2号大街
- 专利权人： 杭州电子科技大学
- 当前专利权人： 杭州电子科技大学,中国电子科技集团公司第三十六研究所
- 当前专利权人地址： 310018 浙江省杭州市下沙高教园区2号大街
- 代理机构： 杭州君度专利代理事务所
- 代理人： 朱月芬
- 主分类号： G10L15/18
- IPC分类号： G10L15/18 ; G10L25/30 ; G10L19/16 ; G10L21/02
摘要：
本发明公开了一种基于Swin‑Trasformer的语音语义通信传输方法，本发明包括以下步骤：1.对语音信号进行数据预处理；2.将预处理后的语音信号通过语义编码器，自动提取语音信号中的语义信号；3.将语义信号通过物理信道以模拟现实生活中的噪声干扰；4.将带有噪声干扰的语义信号通过语义解码器；将带有噪声的信号分别经过卷积层和Transformer‑basedDecoder层，重新构建其浅层特征和深层特征，最后经过KeepfeatLayer实现多重维度语义信息的融合；5.对经过语义解码器的信号进行信号重建，以恢复出原始的语音信号。本发明以时域信号直接作为系统输入，减少了计算的成本，这对于注重时时传输的智能通信系统来说是极为重要的。