语义通信性能评估体系及指标

摘要

鉴于语义通信系统缺乏统一的、具泛化价值的性能评估体系,对现有研究中评估方法的使用情况与不足进行分析,并提出语义通信效率指标Esc和语义通信效用指标Usc。其中,指标Esc用于衡量通信系统在给定通信资源下单位时间开销内的任务完成准确性,指标Usc用于衡量通信系统在给定通信资源下与任务性能上限的接近程度。与现有评估指标相比,这两种指标具有更好的泛用性,可为不同任务场景、模态信息下的语义通信模型横向性能对比提供指导。此外,以语义图像重建与语音重建任务为例,分别搭建端到端语义通信仿真模型,并基于所提Esc与Usc指标对仿真模型性能进行评估。