基于AI辅助的可扩展视频语义通信系统

作     者：韩雪 吴泳澎 施雨轩 张文军 HAN Xue;WU Yongpeng;SHI Yuxuan;ZHANG Wenjun

作者机构：上海交通大学电子信息与电气工程学院上海200240 

基　　金：国家重点研发计划(2018YFB1801102) 国家自然科学基金项目(62122052,62071289) 中央高校基本科研业务费专项资金项目,高等学校学科创新引智计划(BP0719010) 上海市自然科学基金项目(22DZ2229005) 

出 版 物：《移动通信》 (Mobile Communications)

年 卷 期：2023年第47卷第6期

页      码：27-34页

摘      要：语义通信作为一种面向多智能体交互的新型通信范式,对未来通信实现高效传输提供了新的解决方法。由此,提出了一个AI辅助的可扩展视频语义通信系统。该系统能够基于现有的信源信道分离编码方案(如传统的高效视频编码HEVC与低密度奇偶校验编码LDPC),与AI辅助的可学习语义编解码器相结合,实现视频流与语义流的共同传输。其中可学习的语义数据流是视频帧中针对特定任务提取的语义信息,能够较好地提升接收端精确重建与下游任务的性能。实验证明,该视频语义通信框架相较于传统通信,在重建任务性能相差无几的情况下具有更好的下游任务表现;而相较于现有的端到端的基于深度学习的语义通信系统,性能相近的同时能够基于多种传统视频编解码标准进行扩展设计,具有与传统压缩方案更强的耦合性与适应更多场景的能力。

主 题 词：语义通信 视频压缩 深度学习 无线通信 

学科分类：0810[工学-土木类] 08[工学] 081001[081001] 

D　O　I：10.3969/j.issn.1006-1010.20230505-0005

馆 藏 号：203122387...